The development of non-technical skills EBT technology for medical students by integrating AI and VR technology.

通过整合AI和VR技术，为医学生开发非技术技能EBT技术。

• 批准号: 22K18573
• 负责人: 野坂 大喜
• 金额: $ 3.99万
• 依托单位: Hirosaki University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Challenging Research (Exploratory)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-06-30 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22K18573/
• 关键词: 人工知能; 仮想現実; ノンテクニカルスキル; 医学教育; シミュレーション; バーチャルリアリティ

【研究概要】チーム医療が主流となった現在の臨床現場において、ノンテクニカルスキル(NOTECHS)は医療安全の観点から必須の医療者共通スキルとされる。Society5.0による社会課題解決が課題とされる中、操作者に危険を伴わず限りなく現実に近い仮想空間シミュレーション環境構築を可能とするVRは,医療テクニカル教育技術として有用視されている。一方、 NOTECHS教育も医療環境をシミュレートした仮想トレーニング化が必要となるものの、教育手法は対面式に限定され、客観的根拠に基づく訓練(EBT)に基づくスキル評価法も確立していない。本研究は仮想医学教育技術とEBT手法の確立を目的とし『AIとVR技術の融合による医療系学生ノンテクニカルスキルEBT技術』の研究開発を実施した。【研究実績】2022年度研究では、AIとVRの融合による医療系学生向けNOTECHS仮想トレーニング技術の研究を実施した。患者案内や患者問診、患者指導などの医療行為を360度高精細動画にて撮影し、選択した解答に沿って異なるシナリオ動画へ移行していくVR型医療トレーニングシミュレーション環境を構築した。選択においては受講者が音声によりAIに解答を伝えることで次のシナリオへと進行していくAIボットシステムを開発した。VR映像で提示される医療環境と伝達指示のAI解析と融合化したことで、次世代型NOTECHS仮想トレーニング技術の初期基盤技術を確立した。本技術について小規模な実証評価試験を行ったところ、AIの応答速度の向上について改良の必要性が明らかとなった。また複数名にVRを着用させ、両者のやりとりをAIに自然言語解析し、記録データをシミュレーション終了後に解析する比較対照試験を試みた。その結果、両者ともに受講者評価が高く異なるトレーニングシステムとしての有用性が示唆された。

[research summary] the mainstream medical practitioners now have to share the information of medical practitioners in the field of health care, medical safety and health care (NOTECHS). During the Society5.0 social problem solving program, the operator is in danger and the operator is in danger. It is possible that the VR may be affected in the near space environment, and the medical education and technology training program can be used to monitor the health care industry. On the one hand, the NOTECHS education system in the medical environment wants to make sure that the necessary information is available, that the educational methods are limited in terms of face-to-face information, and that the customer's basic health care system (EBT) is based on the establishment of a health care system. In this study, the purpose of this study is to establish the goal of EBT in medical education and technology. the purpose of this study is to conduct a study on the integration of AIVR technology and EBT technology in medical college students. [research Institute] 2022 Research Institute, AI VR Program integrate students from medical colleges and universities to NOTECHS students who want to do research on technology. Discuss the patient's problems in the patient's case, instruct the medical practice to conduct 360-degree high-precision animation video clips, and select the answers to be transferred to the VR type medical practice, medical treatment, environmental monitoring and environmental monitoring. Choose to listen to the recipient and answer the sound AI. Do not listen to the voice of the recipient. Do not listen to the voice of the recipient. If you want to do so, you will not be able to do so. You will not be able to do so after the first AI session. The VR image indicates that the medical environment has reached the instructions of the AI analysis, and the next-generation NOTECHS wants to ensure the establishment of the basic technology at the initial stage of the technology development. In this technology, the speed of response and the speed of AI response are very important to understand the need for improvement. You can use several VR names to analyze the natural language of the AI, and record the data to compare the results. The results show that the recipient is not responsible for the usefulness of the recipient.

项目成果

AI technologies and potentials in clinical laboratory post pandemic

大流行后临床实验室的人工智能技术和潜力

• 发表时间: 2022
• 作者: 野坂 大喜;藤岡 美幸;山形 和史;H Nozaka
• 通讯作者: H Nozaka

Approach to automated detection of atypical lymphocytes in peripheral blood smear screening

外周血涂片筛查中异型淋巴细胞的自动检测方法

• 发表时间: 2022
• 作者: H Nozaka;S Kaga;N Sakaiya;S Kimura;M Kushibiki;S Ogasawara;M Ishiyama;M Nakano;M Fujioka;K Kamata;K Yamagata
• 通讯作者: K Yamagata

Approach to immature granulocytes discrimination with convolutional neural network in peripheral blood smear screening

外周血涂片筛查中卷积神经网络鉴别未成熟粒细胞的方法

• 发表时间: 2022
• 作者: H Nozaka;S Kimura;S Kaga;N Sakaiya;M Kushibiki;S Ogasawara;M Ishiyama;M Nakano;M Fujioka;K Kamata;K Yamagata
• 通讯作者: K Yamagata

Approach to automated classification of nucleated blood cells in peripheral blood smear screening

外周血涂片筛查中有核血细胞自动分类的方法

• 发表时间: 2022
• 作者: H Nozaka;S Hirano;S Souma;A Kobayashi;S Ogasawara;M Kushibiki;M Ishiyama;M Nakano;M Fujioka;K Kamata;K Yamagata
• 通讯作者: K Yamagata

人工知能(AI)を用いた顆粒球系幼若細胞検出・分類技術の開発と評価

利用人工智能（AI）的年轻粒细胞检测和分类技术的开发和评估

• 发表时间: 2022
• 作者: 野坂 大喜;小笠原 脩;櫛引 美穂子;鎌田 耕輔;山形 和史
• 通讯作者: 山形 和史