実習科目向けXR型電子教材の開発基盤システムとデータ駆動型教育手法の研究開発

点击翻译按钮获取中文摘要

各研究項目について以下の通りの実績である。1.1) デバイス対応機能の開発：研究代表者らが開発したウェブVR対応インテリジェントボックス(WebIBVR)をVRゴーグルに対応させ、問題点抽出とその解決策を検討した。また、WebIBVRの入力を手指動作入力デバイス(Leap Motion Controller)へ対応させた。さらに、WebIBVRで開発された歯科治療演習教材へ音声出力機能等を追加し操作性を高めた。1.2)プログラミングなしで教材開発を可能とする機能について継続実施。1.3) 学習データAI分析機能の開発：放射線治療セットアップ演習教材に学習ログデータを保存する機能を実装した。また、VR協調操作環境の研究を開始し、360度VRカメラ動画からOpenPoseによる動作データの抽出機能を実装した。さらに、弱視者歩行補助システムの開発において360度VRカメラ動画から障害物を検出する機能の実装を行った。1.4) 協調操作機能の開発：WebIBVRで開発されている歯科治療演習教材について、Phatomデバイスのハプティック入力とVRゴーグルのステレオ視表示環境での協調操作実験を行い、問題点抽出とその解決策を検討した。1.5) XR型電子教材の開発実践：360度VRカメラの静止画・動画から容易にVR演習教材を開発するフレームワークを開発した。2.1)については来年度以降の実施計画である。2.2) 実習支援機能の開発：1.3)の機能により助言を与える助言機能と実習課程における疑問に答える問い合わせ対応機能の一部を放射線治療セットアップ演習教材へ導入した。2.3) XR型電子教材の教育手法の開発：3次元CGによるIoTセキュリティ教材(シリアスゲーム)を開発しユーザ評価した。2.4) XR型電子教材の評価手法の開発：基盤と教材開発に注力したため、来年度以降の継続実施。