High speed sensing of latent biological activities prior to human actions and their very early stages for accident prevention

点击翻译按钮获取中文摘要

前年度(2021年度)に続いて今年度も新型コロナウィルスの感染対策が10月頃まで続いたため、予定していた「人の参加を伴う実験やデータ収集」を行うことができなかった。しかしながら、昨年度に感染が続くことを見越して研究計画を変更しており、被検者に実験室に来て頂かなくとも自宅にいながらオンラインで実験に参加できるように研究計画を変更していたので、その計画に沿って今年度の研究を行った。昨年度に仮想空間でリアルな事故体験ができるようにするため、ヘッドマウントディスプレイによる映像とヘッドフォンによる３Ｄ音響、さらに衝撃や振動等の触覚情報を生成する装置を用いたオンライン実験環境を構築したので今年度もこの装置で再現する事故例について、被検者の反応をカメラや各種センサで計測して、機械学習用のデータを収集しNASに蓄積した。またまず一般的な画像データで基盤モデルを機械学習で形成し、独自に収集したデータの不足を補えるようにファインチューニングをするようにした。人に条件反射を生じさせるために体を傾けたり、揺らしたりする装置（揺動装置）が必要となることから、オンラインの実験で自宅に持ち込んで使えるような軽量小型の揺動装置を昨年度試作したが、その性能や機能を改善するために新たな装置を試作した。2020年度に制作した超高感度、超高速フォトリフレクターアレイを使って眼球運動を高速に計測して、運動準備の潜在生体活動を検知することによって人の行動を予測することを試みた。その際にメガネガラス表面からの反射が計測を邪魔することが問題となり、そのような反射を除去する手法を開発して国際会議VR2023で発表した。