The development of non-technical skills EBT technology for medical students by integrating AI and VR technology.

通过整合AI和VR技术，为医学生开发非技术技能EBT技术。

• 批准号: 22K18573
• 负责人: 野坂 大喜
• 金额: $ 3.99万
• 依托单位: Hirosaki University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Challenging Research (Exploratory)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-06-30 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22K18573/
• 关键词: 人工知能; 仮想現実; ノンテクニカルスキル; 医学教育; シミュレーション; バーチャルリアリティ

【研究概要】チーム医療が主流となった現在の臨床現場において、ノンテクニカルスキル(NOTECHS)は医療安全の観点から必須の医療者共通スキルとされる。Society5.0による社会課題解決が課題とされる中、操作者に危険を伴わず限りなく現実に近い仮想空間シミュレーション環境構築を可能とするVRは,医療テクニカル教育技術として有用視されている。一方、 NOTECHS教育も医療環境をシミュレートした仮想トレーニング化が必要となるものの、教育手法は対面式に限定され、客観的根拠に基づく訓練(EBT)に基づくスキル評価法も確立していない。本研究は仮想医学教育技術とEBT手法の確立を目的とし『AIとVR技術の融合による医療系学生ノンテクニカルスキルEBT技術』の研究開発を実施した。【研究実績】2022年度研究では、AIとVRの融合による医療系学生向けNOTECHS仮想トレーニング技術の研究を実施した。患者案内や患者問診、患者指導などの医療行為を360度高精細動画にて撮影し、選択した解答に沿って異なるシナリオ動画へ移行していくVR型医療トレーニングシミュレーション環境を構築した。選択においては受講者が音声によりAIに解答を伝えることで次のシナリオへと進行していくAIボットシステムを開発した。VR映像で提示される医療環境と伝達指示のAI解析と融合化したことで、次世代型NOTECHS仮想トレーニング技術の初期基盤技術を確立した。本技術について小規模な実証評価試験を行ったところ、AIの応答速度の向上について改良の必要性が明らかとなった。また複数名にVRを着用させ、両者のやりとりをAIに自然言語解析し、記録データをシミュレーション終了後に解析する比較対照試験を試みた。その結果、両者ともに受講者評価が高く異なるトレーニングシステムとしての有用性が示唆された。

[the summary] チ ー ム medical が mainstream と な っ た の clinical site now に お い て, ノ ン テ ク ニ カ ル ス キ ル (NOTECHS) は medical safety の 観 point か ら must の common healer ス キ ル と さ れ る. Society5.0 に よ る social subject solution が subject と さ れ る に, operators in dangerous 険 を with わ ず limit り な く now be に nearly い 仮 space シ ミ ュ レ ー シ ョ ン environment construct を may と す る VR は, medical テ ク ニ カ ル education technology と し て useful visual さ れ て い る. Party, NOTECHS education も medical environment を シ ミ ュ レ ー ト し た 仮 think ト レ ー ニ ン グ change が necessary と な る も の の, education technique は surface type に seaborne qualified さ れ, guest 観 root 拠 に base づ く training (EBT) に づ く ス キ も 価 ル evaluation method to establish し て い な い. This study は 仮 want to medical education technology と EBT gimmick の establish を purpose と し "AI と VR technology の fusion に よ る clinical students ノ ン テ ク ニ カ ル ス キ ル EBT technology" の research open 発 を be applied し た. 2022 annual research study be performance 】 【 で は, AI と VR の fusion に よ る clinical students to け NOTECHS 仮 think ト レ ー ニ ン グ technology の を be applied し た. Doctors visits, case in patients with や patients guide な ど の を 360 degrees high fine medical behavior animation に て pinch of shadow し, sentaku し た answer に along っ て different な る シ ナ リ オ animation へ transitional し て い く VR type medical ト レ ー ニ ン グ シ ミ ュ レ ー シ ョ ン environment を construct し た. Sentaku に お い て は by speakers が sounds に よ り AI に answer を 伝 え る こ と で times の シ ナ リ オ へ と for し て い く AI ボ ッ ト シ ス テ ム を open 発 し た. VR image で prompt さ れ る medical environment と 伝 parsing of instructions の AI と syncretizing し た こ と で, next generation NOTECHS 仮 think ト レ ー ニ ン グ technology base plate early の を establish し た. This technical に つ い て small-scale な card be review 価 test line を っ た と こ ろ, AI の 応 の a speed up に つ い て improved の necessity が Ming ら か と な っ た. ま た に VR を with plural name さ せ, struck の や り と り を AI に natural language parsing し, record デ ー タ を シ ミ ュ レ ー シ ョ ン に after the end of analytic す る compared polices according to test try を み た. そ の results, struck と も に by speakers review 価 が high く different な る ト レ ー ニ ン グ シ ス テ ム と し て の usefulness が in stopping さ れ た.

项目成果

AI technologies and potentials in clinical laboratory post pandemic

大流行后临床实验室的人工智能技术和潜力

• 发表时间: 2022
• 作者: 野坂 大喜;藤岡 美幸;山形 和史;H Nozaka
• 通讯作者: H Nozaka

Approach to automated detection of atypical lymphocytes in peripheral blood smear screening

外周血涂片筛查中异型淋巴细胞的自动检测方法

• 发表时间: 2022
• 作者: H Nozaka;S Kaga;N Sakaiya;S Kimura;M Kushibiki;S Ogasawara;M Ishiyama;M Nakano;M Fujioka;K Kamata;K Yamagata
• 通讯作者: K Yamagata

Approach to immature granulocytes discrimination with convolutional neural network in peripheral blood smear screening

外周血涂片筛查中卷积神经网络鉴别未成熟粒细胞的方法

• 发表时间: 2022
• 作者: H Nozaka;S Kimura;S Kaga;N Sakaiya;M Kushibiki;S Ogasawara;M Ishiyama;M Nakano;M Fujioka;K Kamata;K Yamagata
• 通讯作者: K Yamagata

Approach to automated classification of nucleated blood cells in peripheral blood smear screening

外周血涂片筛查中有核血细胞自动分类的方法

• 发表时间: 2022
• 作者: H Nozaka;S Hirano;S Souma;A Kobayashi;S Ogasawara;M Kushibiki;M Ishiyama;M Nakano;M Fujioka;K Kamata;K Yamagata
• 通讯作者: K Yamagata

人工知能(AI)を用いた顆粒球系幼若細胞検出・分類技術の開発と評価

利用人工智能（AI）的年轻粒细胞检测和分类技术的开发和评估

• 发表时间: 2022
• 作者: 野坂 大喜;小笠原 脩;櫛引 美穂子;鎌田 耕輔;山形 和史
• 通讯作者: 山形 和史