1 / 21

内視鏡画像からの奥行き情報提示による 視覚支援システムの開発

内視鏡画像からの奥行き情報提示による 視覚支援システムの開発. 筑波大学 システム情報工学研究科 コンピュータサイエンス専攻 安藤竜太　福井幸男　三谷純　西原清一. 発表の流れ. 研究の背景と目的 内視鏡動画像に適した奥行き推定手法 比較実験 提案 まとめ・今後の課題. 研究の背景 (1/2). 内視鏡下手術とは 患者の体表面の小さな穴に内視鏡と手術器具 を入れ、内視鏡からの映像を元に行う手術. １．研究の背景と目的. 研究の背景 (2/2). 内視鏡下手術の利点 患者にとって低負担 手術時間の短縮 内視鏡下手術の欠点 奥行き情報の欠如

emilie
Download Presentation

内視鏡画像からの奥行き情報提示による 視覚支援システムの開発

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. 内視鏡画像からの奥行き情報提示による視覚支援システムの開発内視鏡画像からの奥行き情報提示による視覚支援システムの開発 筑波大学 システム情報工学研究科 コンピュータサイエンス専攻 安藤竜太　福井幸男　三谷純　西原清一

  2. 発表の流れ 研究の背景と目的 内視鏡動画像に適した奥行き推定手法 比較実験 提案 まとめ・今後の課題

  3. 研究の背景(1/2) • 内視鏡下手術とは 患者の体表面の小さな穴に内視鏡と手術器具 を入れ、内視鏡からの映像を元に行う手術 １．研究の背景と目的

  4. 研究の背景(2/2) • 内視鏡下手術の利点 • 患者にとって低負担 • 手術時間の短縮 • 内視鏡下手術の欠点 • 奥行き情報の欠如 • 手術器具による接触事故 １．研究の背景と目的

  5. 研究の目的 • 奥行き情報提示による視覚支援システムの開発 　目指すシステムは・・・ • 奥行き情報を高精度で抽出できる • リアルタイム性を持つ • 医師に上手く提示する システム １．研究の背景と目的

  6. 内視鏡動画像の特徴と奥行き推定手法 • 内視鏡動画像の問題点・利点を理解 • 既存手法を理解 内視鏡動画像に適した奥行き推定手法を提案 ２．内視鏡動画像に適した奥行き推定手法

  7. 内視鏡動画像の問題点１ • 鏡面反射の多さ • 反射関数を用いた手法 関連研究： 複数枚の写真からの３次元形状と反射係数復元 Athinodoros S. Georghiades Department of Electrical Engineering, Yale University, New Haven, CT 06520, U.S.A. ２．内視鏡動画像に適した奥行き推定手法

  8. 奥行き抽出手法 • 注目点追跡　→　奥行き推定　手法 赤が手前 青が奥 時刻ｔ 時刻ｔ＋⊿ｔ ２．内視鏡動画像に適した奥行き推定手法

  9. 内視鏡動画像の問題点２ • 特徴点の少なさ • 特徴点を使用した追跡 ２．内視鏡動画像に適した奥行き推定手法

  10. 注目点追跡 注目点追跡 結果 注目点 一様に置いた注目点を使用 ２．内視鏡動画像に適した奥行き推定手法

  11. 内視鏡動画像の問題点３ • 光源移動による注目点の輝度値変化 • 通常のブロックマッチング法 4 1 1 1 1 1 1 1 1 1 2 1 4 1 9 6 9 6 1 3 2 1 8 7 8 7 1 2 1 1 3 1 時刻ｔ 時刻ｔ+Δｔ ２．内視鏡動画像に適した奥行き推定手法

  12. ブロックマッチング法の改良 6 5 4 2 1 0 3 4 4 -1 0 0 2 3 2 -4 -2 -1 -2 勾配を利用 ２．内視鏡動画像に適した奥行き推定手法

  13. ブロックマッチング法の改良 フレーム１ フレーム２ それでも、誤差を含む 結果

  14. 注目点追跡情報からの奥行き推定 注目点追跡誤差に強い手法 • 疑似透視投影因子分解法 • 線形計算が可能 • 最小二乗法１ • 内視鏡動画像 • 最小二乗法２ • 内視鏡動画像　→　多視点画像群 ２．内視鏡動画像に適した奥行き推定手法

  15. 比較実験 計算機内の仮想物体による実験 • 追跡情報の誤差なし • カメラ移動が自由 ３．比較実験

  16. 結果 ※誤差：奥行き偏差値の誤差 ３．比較実験

  17. 提案１ 模擬手術では… 奥行きがわかりにくい箇所 は時間を掛けて慎重に手術していた 最小二乗法１を使用 疑似透視投影因子分解法を使用 最小二乗法２ ※誤差：奥行き偏差値の誤差 ４．提案

  18. 提案１ 開始 YES 精度 必要か NO 因子分解法 最小二乗法２ NO 回転 含むか 最小二乗法１ YES 終了 処理の流れ ４．提案

  19. 提案２ 少数の注目点 ２回目以降は 探索範囲が絞られる 注目点追跡 注目点追跡の見直し（収束するまで） カメラ運動推定 全注目点追跡 探索範囲が絞られる カメラ運動推定 精度と計算時間の短縮 ４．提案

  20. 今後の課題 • 画素単位より小さいレベルでの注目点追跡 • 医師への見せ方 • 直感的に奥行きがわかりやすいように ５．まとめ・今後の課題

  21. 御清聴ありがとうございました

More Related