臨床能力を育む医療教育システムの実現に向けた患者仮想化技術の創出

创建患者虚拟化技术，实现培养临床能力的医学教育系统

• 批准号: 22H03632
• 负责人: 山本 豪志朗
• 金额: $ 10.9万
• 依托单位: Kyoto University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (B)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2026-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-22H03632/
• 关键词: 複合現実感; 医学教育; ヒューマンコンピュータインタラクション; 拡張現実感; 医療教育

研究代表者の山本グループでは，京都大学医学部附属病院にある診療録情報を対象に，患者仮想化実現に向けた実際の患者症状の調査を行い，多種のデータ形式のなかから本研究を効率よく推進していくための情報を整理し，今後の方針について検討を行った．医師との議論も定期的に実施し，患者仮想化に向けた課題点などを洗い出す作業を継続的に行っている．一方で，超音波検査装置を用いて，疑似病変を生成する技術の構築に着手している．具体的には，エコーで捉え得る病変の調査を実施し，その中から対象となる病変を選択した上で，拡張現実感を応用することであたかも病変が映り込んでいるかのように画像を加工してみせる手法を考案している．検討を重ねていくために専用の計算機を用意し，分担者の山本から助言を得つつ，その病変表現の模索を実施している．分担者の酒田グループでは，既存データベースから仮想患者データへの変換の試みとして，Web 上に存在する画像データをクローリングにより取得したデータをもとに，画像データベースを構築する手法について検討を行った．そして，仮想患者を表現するためのデータ形式への変換について検討した．分担者の高嶋グループでは，VR 技術の医学教育応用について関連研究サーベイと研究課題の明確化およびプロトタイプの設計に取り組んだ．分担者の池田グループは，既存データベースから仮想患者データへの変換の試みとして，仮想患者の自然な目線の生成技術の開発に着手した．人間らしい視線の特徴を過不足なく表現する特徴空間の設計指針を得るために，MIT Saliency Benchmark datasets 中の視線データのみを用いてシンプルな autoencoder を構築した．その結果，乱数入力（任意の入力）に対して固視やサッケード，瞬きなど基本的な特徴を含む視線を生成できることを確認した．

Research representatives の yamamoto グ ル ー プ で は, Kyoto university medicine affiliated hospital に あ る medical record information を like に, seaborne 仮 want to change be current に to け た be interstate の symptoms の survey line を い, multiple の デ ー タ form の な か か ら を this study working rate よ く propulsion し て い く た め の intelligence を し, future の policy に つ い て 検 line for を っ た. Physicians と の comment も regular に be し, patients 仮 want to change to け に た topic point な ど を い out す washing work を 継 続 に line っ て い る. Side で, ultrasound 検 check device を with い て, suspected disease - を generated す の る technology to construct に hands し て い る. Specific に は, エ コ ー で catch diseases る え - の survey を be し, そ の in か ら like と seaborne な る disease - を sentaku し た で, company, zhang is now be feeling を 応 with す る こ と で あ た か も disease - が reflected り 込 ん で い る か の よ う に portrait を processing し て み せ る gimmick を test case し て い る. Beg を heavy 検 ね て い く た め に 専 purpose use の computer を し, sharers の yamamoto か ら help talk を つ つ, そ の disease - performance の die line を be applied し て い る. Sharers の sakata グ ル ー プ で は, existing デ ー タ ベ ー ス か ら 仮 think patients デ ー タ へ の variations in の try み と し て, Web に exist on す る portrait デ ー タ を ク ロ ー リ ン グ に よ り obtain し た デ ー タ を も と に, portrait デ ー タ ベ ー ス を build す る gimmick に つ い て 検 line for を っ た. そ し て 仮 to patients present を す る た め の デ ー タ form へ の variations in に つ い て beg し 検 た. Sharers の high Mr グ ル ー プ で は, VR technology の medical education 応 with に つ い て masato even study サ ー ベ イ と research topic fraught の お よ び プ ロ ト タ イ プ の design に group take り ん だ. Sharers の ikeda グ ル ー プ は, existing デ ー タ ベ ー ス か ら 仮 think patients デ ー タ へ の variations in の try み と し て, 仮 の generation technique to patients の natural な line の open 発 に to し た. Human ら し い sight の, 徴 を had insufficient な く performance す る 徴 spatial の design the pointer を る た め に, MIT Saliency Benchmark datasets in の sight デ ー タ の み を with い て シ ン プ ル な autoencoder を build し た. そ の as a result, the confusion of number (any の) into force に し seaborne て fixation や サ ッ ケ ー ド, instantaneous き な ど basic of な 徴 を containing む sight を generated で き る こ と を confirm し た.

项目成果

Gaze Depth Estimation for In-vehicle AR Displays

车载 AR 显示器的注视深度估计

• 发表时间: 2023
• 作者: Ryusei Uramune;Kazuki Sawamura;Sei Ikeda;Hiroki Ishizuka;Oshiro Osamu
• 通讯作者: Oshiro Osamu

手術室内のグループ行動認識に向けた手術室監視映像解析

手术室监控视频分析用于手术室群体行为识别

• 发表时间: 2022
• 作者: 横江健太;青山忠義;舟洞佑記;坂井佑輔;竹内大;長谷川泰久;横山晃士，山本豪志朗，劉暢，岸本和昌，黒田知宏
• 通讯作者: 横山晃士，山本豪志朗，劉暢，岸本和昌，黒田知宏

注視点の奥行き変化を再現する眼球運動生成

再现注视点深度变化的眼动生成

• 发表时间: 2022
• 作者: 槻木 日向太;池田 聖;石塚 裕己;大城 理
• 通讯作者: 大城 理

Individual Activity Anomaly Estimation in Operating Rooms Based on Time-Sequential Prediction

基于时序预测的手术室个体活动异常估计

• 发表时间: 2023
• 作者: Koji Yokoyama;Goshiro Yamamoto;Chang Liu;Kazumasa Kishimoto;Yukiko Mori;Tomohiro Kuroda
• 通讯作者: Tomohiro Kuroda

車両移動による運動視差を利用した半透明像注視判定

利用车辆运动引起的运动视差确定半透明图像注视点

• 发表时间: 2022
• 作者: 澤村和樹;浦宗龍生;池田 聖;石塚裕己;大城 理
• 通讯作者: 大城 理