Deep Learning for improving forensic Craniofacial Superimposition method

深度学习改进法医颅面叠加方法

• 批准号: 19F19119
• 负责人: 今泉 和彦
• 金额: $ 0.7万
• 依托单位: National Research Institute of Police Science
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2019
• 资助国家: 日本
• 起止时间: 2019-07-24 至 2021-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-19F19119/
• 关键词: CNN; 深層学習; 法科学; 個人識別; 頭蓋-顔写真スーパーインポーズ法; パースペクティブ

犯罪捜査において、白骨死体等の身元不明死体の個人識別は極めて重要である。本研究課題で扱う頭蓋―顔写真スーパーインポーズ法は、頭蓋骨と生前の顔写真と重ね合わせることにより互いの合致性を検査し、本人かどうかを明らかにするものである。本研究では、頭蓋骨と顔写真の重ね合わせ作業に不可欠な、頭蓋骨の3次元形状へのランドマーク設定の自動化を試みた（以下、本検討項目を「CFS (Cranio-facial superimposition)」という）。また、顔写真には撮影距離によるパースが少なからず生じており、CSFには頭蓋骨3次元形状の補正が不可欠であるところ、この撮影距離を顔写真から推定する手法について、深層学習をベースとした検討を併せて行った（以下、本検討項目を「SCD (subject to camera distance)」という）。CSFについては、スペイン・グラナダ大学が所蔵する頭蓋骨3次元形状と、同大学と共同研究体制にあるソフトウェアベンダーが開発中である、個人識別支援ソフトウェアを用いた。特別研究員は、コンピュータ画像解析に基づいた自動ランドマーク設定法を開発し、受入側である当研究室では、3名の研究員が熟練検査者として頭蓋骨に手作業でランドマークを設定し、これらと、特別研究員が開発した自動化法によるものとの精度を比較した。SCDについては、当研究室で男性10名の被験者を募り、複数の焦点距離レンズによる、複数顔角度、複数撮影距離における顔画像撮影を行った。なお、撮影は無表情のものに加えて、自然な各種表情でも行った。また、検討に必要な被験者の顔の3次元的な形状と寸法を得るため、当研究室がもつ3Dレンジファインダーにより3次元顔画像を撮影した。これら膨大な数の画像に対し、畳み込みニューラルネットワークによる深層学習を行い、単一顔画像から撮影距離を推定する手法を開発した。

Criminal investigation, white bones, dead bodies, etc. Personal identification of unidentified dead bodies is extremely important. This research topic is to investigate the compatibility of cranium, skull and facial features. In this study, we will try to automate the 3D shape of cranium (CFS (Cranio-facial superposition)). The correction of the three-dimensional shape of the skull in CSF is indispensable. The method of estimating the distance between the images and the images is discussed in depth learning (hereinafter, the subject to camera distance is SCD). CSFs are used in the development of software and personal identification support for the 3D shape of skulls owned by universities and joint research institutions. Special researchers developed the automatic setting method for basic image analysis, and compared the accuracy of the automatic setting method developed by the special researchers with that of the three researchers skilled in the manual operation of cranium in the research room. SCD is the research center for 10 male subjects, multiple focus distance, multiple image angle, multiple image distance, and multiple image capture.なお、撮影は无表情のものに加えて、自然な各种表情でも行った。The 3D shape and size of the subject's face are necessary for the study, and the 3D image of the subject is captured in the study room. The method for estimating image distance is developed.