Mixed Realityと人工知能で実現する関節リウマチ遠隔医療システムの構築

我々は関節リウマチ（RA）患者を対象にMixed Reality（複合現実）による関節診察を軸とした遠隔医療システム（NURAS）を開発した。本システムでは、人工知能（AI）の実装およびオンライン会議システム、評価アプリケーションとの連携により診療をサポートする。本研究では、実証実験によりリウマチ専門医が遠隔地（離島）のRA患者を非専門医とともに診療し、実臨床におけるNURASの有用性を評価する。それと同時にNURASのAI等機能強化と情報インフラの整備・強化を進める。I. システムの評価：五島中央病院と長崎大学病院の間で実証実験を開始した。まず、非Difficult-to-Treat RA患者を対象に、遠隔診療導入前と3ヶ月後、6ヶ月後、12ヶ月後において 前向き観察研究を行い、臨床的疾患活動性評価指標、PRO（患者報告アウトカム）、患者満足度/非専門医の満足度を評価した。評価はタブレット端末上の患者アンケート/関節評価アプリケーションを用いたIoTにより情報を収集した（ePRO: electronic PRO）。II. システムの開発・環境整備　① AIによる診療サポートシステムの構築：実証実験に置いて言語認識機能によるリアルタイム文字起こしカルテに保存する機能を運用した。同時翻訳機能アプリとの連携を検討中である。また、画像認識機能により、Mixed Realityによるホログラムの異常部位を自動検出するべく、教師画像を収集している。② 各種デバイス（画像診断等）との連携強化：タブレット端末との連携により診察前のePRO記録を実施した。4Kカメラと４Kモニタを用いた高画質映像による視診の強化を行った。4Kカメラを遠隔操作可能なリモートコントローラと連携した。③セキュリティや情報インフラの整備・強化： ICT基盤センター等と連携し、ネットワーク環境の整備を検討している。

我々は関節リウマチ（RA）患者を対象にMixed Reality（複合現実）による関節診察を軸とした遠隔医療システム（NURAS）を開発した。本システムでは、人工知能（AI）の実装およびオンライン会議システム、評価アプリケーションとの連携により診療をサポートする。本研究では、実証実験によりリウマチ専門医が遠隔地（離島）のRA患者を非専門医とともに診療し、実臨床におけるNURASの有用性を評価する。それと同時にNURASのAI等機能強化と情報インフラの整備・強化を進める。I. システムの評価：五島中央病院と長崎大学病院の間で実証実験を開始した。まず、非Difficult-to-Treat RA患者を対象に、遠隔診療導入前と3ヶ月後、6ヶ月後、12ヶ月後において 前向き観察研究を行い、臨床的疾患活動性評価指標、PRO（患者報告アウトカム）、患者満足度/非専門医の満足度を評価した。評価はタブレット端末上の患者アンケート/関節評価アプリケーションを用いたIoTにより情報を収集した（ePRO: electronic PRO）。II. システムの開発・環境整備　① AIによる診療サポートシステムの構築：実証実験に置いて言語認識機能によるリアルタイム文字起こしカルテに保存する機能を運用した。同時翻訳機能アプリとの連携を検討中である。また、画像認識機能により、Mixed Realityによるホログラムの異常部位を自動検出するべく、教師画像を収集している。② 各種デバイス（画像診断等）との連携強化：タブレット端末との連携により診察前のePRO記録を実施した。4Kカメラと４Kモニタを用いた高画質映像による視診の強化を行った。4Kカメラを遠隔操作可能なリモートコントローラと連携した。③セキュリティや情報インフラの整備・強化： ICT基盤センター等と連携し、ネットワーク環境の整備を検討している。