自動音声認識と機械学習による新たな医学教育システムの創出

使用自动语音识别和机器学习创建新的医学教育系统

• 批准号: 22K10459
• 负责人: 小林 正和
• 金额: $ 2.66万
• 依托单位: Tohoku University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22K10459/
• 关键词: 心肺蘇生; 音声認識; シミュレーション教育; 機械学習; 自然言語処理; 音声入力

本研究課題実施計画に関して、成果を以下に報告する。①既存のシミュレーション教育シナリオから、熟練した指導者が評価するレベルで評価項目のチェックリストを作成する：予定通りに進行し、24のシナリオに関してチェックリストと時間経過の目安を作成した。②シミュレーション中の発話内容を音声認識・自然言語処理により自動記録するシステムを開発する：心肺蘇生法および病院前救急隊活動のシミュレーション4コースにおいて、シナリオ実施中に学習者の音声を取得した。共同研究企業であるTXP medical株式会社のアプリケーションを改良しシステムを開発している。音声認識に関してはまだ技術的課題があるが、シミュレーション中の受講者の言動はシステムを用いて簡便に記録し、掲示板形式で表示することができている。現在、実際のシミュレーションにて検証を実施している。③記録内容とシナリオチェックリストの整合性を機械学習で評価するシステムを開発する。④結果と時間軸の記録をデブリーフィングツールに反映する：シミュレーション中の記録内容と時間経過を共有しデブリーフィングに用いることはできており、機械学習でチェックリストとの整合性を評価するシステムを現在開発中である。〇今後の予定 音声認識・自然言語処理により記録した内容とシナリオチェックリストの整合性を機械学習で評価し、結果と時間軸の記録をデブリーフィングツールに反映するシステムの開発を進める。プロトタイプを実際のシミュレーションで試用し、音声認識・自然言語処理による自動記録の精度向上を進め、システムの完成を目指す。システム完成後、実際のシミュレーションコースに本システムを導入し、学習効果の向上に関して、学習者の到達度評価や学習者・指導者に対する質問紙を用いて検証研究を行う。

The implementation plan of this research project is に related to て and the results are を. The following is a に report する. (1) the preexisting の シ ミ ュ レ ー シ ョ ン education シ ナ リ オ か ら and skilled し た mentor が review 価 す る レ ベ ル で review 価 project の チ ェ ッ ク リ ス ト を made す る : designated general り に し, 24 の シ ナ リ オ に masato し て チ ェ ッ ク リ ス ト と time 経 の mesh Ann を made し た. In (2) シ ミ ュ レ ー シ ョ ン の 発 words content を sounds of words to understand the nature, 処 Richard に よ り automatic recording す る シ ス テ ム を open 発 す る : cardiopulmonary Sue body お よ び hospital emergency team activities before の シ ミ ュ レ ー シ ョ ン 4 コ ー ス に お い て, シ ナ リ オ be applied in に learners の sounds を obtain し た. Joint research enterprises であるTXP medical co., ltd. アプリケ である ショ を を improvement <s:1> システムを development て て る る. Sounds know に masato し て は ま だ technology subject が あ る が, シ ミ ュ レ ー シ ョ ン in の by speakers の word は still シ ス テ ム を with い て simple に record し, the first white jasmines ShiBan form said で す る こ と が で き て い る. Now, in practice, シ シ ュレ ショ ショ にて検 にて検 are in practice, を are in practice, て る る. ③ Recorded content: とシナリ, チェッ, リスト, <s:1> integrated を, machine learning, で, evaluation, 価するシステムを, development, する. (4) the results と timeline の record を デ ブ リ ー フ ィ ン グ ツ ー ル に reflect す る : シ ミ ュ レ ー シ ョ ン の record content と time 経 を mutual し デ ブ リ ー フ ィ ン グ に with い る こ と は で き て お り, mechanical learning で チ ェ ッ ク リ ス ト と を の conformity assessment 価 す る シ ス テ ム を now open 発 で あ る. .through the future の to set sounds know, natural speech 処 Richard に よ り record し た content と シ ナ リ オ チ ェ ッ ク リ ス ト の integrated を rote learning で review 価 し, results と timeline の record を デ ブ リ ー フ ィ ン グ ツ ー ル に reflect す る シ ス テ ム の open 発 を into め る. プ ロ ト タ イ プ を be interstate の シ ミ ュ レ ー シ ョ ン で し trial words, sounds, natural 処 Richard に よ る automatic recording の を upward into め precision, シ ス テ ム の complete を refers す. シ ス テ ム, after the completion of the event be の シ ミ ュ レ ー シ ョ ン コ ー ス に this シ ス テ ム を import し, study working fruit の up に masato し て, learners arrive の degree evaluation 価 や learners, mentor に す seaborne る question paper を い て を line う 検 syndrome research.