Development of surgical navigation system for esophageal atresia / tracheoesophageal fistula using AI Image analysis and forceps location information

点击翻译按钮获取中文摘要

胸腔鏡下食道閉鎖症手術は1つの視野にメルクマールとなると特徴的な解剖構造が集中し、更に術野を固定したままの状態で手術が行われるため、AI画像解析による解剖構造の表示機能を備えた手術ナビゲーションシステムとの相性は良い。解剖構造表示機能においては、指標として、各解剖構造（迷走神経、奇静脈、気管食道瘻、上部食道盲端、下部食道盲端）の見え方（アビアランス）、位置、サイズなどを利用するが、小児外科専門医が手術のメルクマールとなる解剖構造（迷走神経、奇静脈、気管食道瘻、上部食道盲端、下部食道盲端）のアノテーション・評価画像の正解ラベル付与を行う。食道閉鎖症5症例を用いてそれぞれの解剖構造物に対して、全部で2,000画像のアノテーションを行った。解剖構造表示機能のIoU:0.5とそれほど良くないがかなり構造物を予想できることがわかった。鉗子検出および剥離操作評価方法はYOLO v3による鉗子領域の認識を中心に、鉗子先端のアノテーションを10000画像行い、YOLOの学習と評価は４-fold cross validation（7500画像で学習、2500画像で評価）で検証した。精度はIoU:0.６程度であるが、動きをある程度捉えることができるようになった。縫合操作に関しては、今までのアルゴリズムからある程度熟練度を評価できると考えられた。小児外科の手術操作で特有な愛護的操作である下部食道の剥離操作（no-touch technique of lower esophagus）の評価システムを構築するための基礎的なデータは完成した。鉗子認識をより正確に行うことで、より正確な動きの解析を行うように改良している。