俯瞰的視座の動画共有を基盤とした遠隔指導システムによる細胞培養技術教育のＤＸ戦略

点击翻译按钮获取中文摘要

本年度は細胞培養技術評価の指導システムの構築を行なった。当初はZoom等を用いた双方向ライブ配信による指導を計画していたが、予備的に実施したところ指導者と受講者の日程・時間の調整が問題となることが判明した。そこで新たに非同期型動画評価ツール「tsucom」を用いて、受講者が撮影した培養作業動画を事後に評価することとした。このシステムの特徴はアップロードした動画に対して、注意をすべき操作を行なったタイミングに指導者が音声指導と文字入力を用いて指導を行うことができる点である。基本的に受講者は指導が入った作業動画を後日確認することになるが、受講者とオンラインでつながりながら指導者が指導を行うライブ形式も可能である。さらに培養作業動画の撮影方法として、本研究で提唱している俯瞰画像に加えて、作業者の目線である正面からの画像を360°カメラで撮影した。この正面画像と俯瞰画像を2画面並べて評価することで、指導者は主観的な作業者の目線を確認しながら客観的な評価を下すことが可能となった。現在、この2視点カメラを用いた動画による指導を予備的に行なって、技術的な問題がないか検証している。今後は2視点からの作業動画と指導者による指摘事項をAI学習させ、自動的に問題操作を抽出することができるAI評価システムを構築する計画である。