表題番号：2019C-704 日付：2020/05/07
研究課題手術ワークフローのデジタル化のための術中動画像処理・シナリオ自動生成の研究
研究者所属（当時） 資格 氏名
（代表者） 理工学術院 創造理工学部 教授 大谷　淳
研究成果概要
　本研究では，手術室に設置された術場カメラから獲得される動画像から手術工程を認識する方法として，動画像の各フレームにおける執刀医と看護師の関節を特徴点として検出し，Bag of Visual Wordsを用いて分類器を作成し，工程を認識する手法を提案する．特徴点検出には少数のデータにより転移学習を行ったDeepLabCutを用いる．検出された特徴点とそれらを結ぶスケルトンモデルを描画し，検出した特徴点を多次元空間中でクラスタリングし，その結果を利用する工程の分類器を作成した．提案法により未知の動画像から手術工程が認識される．手術室において二人の手術医の模擬手術を撮像することにより獲得された動画像に対して提案手法を適用し、有効性の見通しを得た．