Plane-to-Rayライトトランスポート計測に基づく皮下血管のリアルタイムイメージングシステム

1. はじめに

シーン中の光の伝搬(ライトトランスポート)は,反射や屈折,表面下散乱や相互反射など様々な要素から構成されており,コンピュータグラフィクス分野ではライトトランスポート理論として古くから定式化されている。また,より実際の計測環境に即した照明と観測装置とを結ぶ光の伝播を示す表現(いわゆるライトトランスポート行列)もしばしば用いられている。ライトトランスポートはその計測を通じてシーンの様々な性質を推定することが可能であるが,膨大な計測回数や時間,保存領域が必要になることが課題である。

そこで,ライトトランスポートをいくつかの成分に大別したうえで,それぞれを個別に計測することが一般的であり,例えば偏光の違いを利用して拡散反射光成分と鏡面反射光成分とを分離する手法1〜3)や,空間的周波数の違いを利用して直接光成分と大域光成分とに分離する手法4)などが知られている。近年では,平行化(rectification)されたプロジェクタ-カメラシステムを用いて直接光と間接光がエピポーラ幾何学的に満たす性質の違いを利用し,個別に取得する方法5, 6)が提案されている。Episcan3D5)はラスタスキャン方式で映像をシーンに投影可能なレーザープロジェクタとローリングシャッター方式のカメラとを時間的に同期させて撮影することで,エピポーラ光と非エピポーラ光を分離したイメージング(以下,エピポーラ画像,非エピポーラ画像)を実現した。

私たちは,Episcan3D5)を拡張し,同様のセットアップを用いて非エピポーラ光として観測される間接光成分に対して,近距離で生じたものか遠距離からのものかを区別して取得する手法を開発し,奈良先端大学,カーネギーメロン大学,及びアリゾナ州立大学の国際共著論文を発表した7)。本稿ではその概要を紹介する。

2. システム概要

図1 本研究で用いるプロジェクタ−カメラシステムの模式図。レーザープロジェクタとローリングシャッターカメラとがエピポーラ平面に沿ってシーンを水平に照明・撮影しながら上下にスイープする。

図1には本研究で使用するプロジェクタ-カメラシステムを模式的に表している。まず,カメラはローリングシャッタ方式のものを用いる。同方式のカメラでは,イメージセンサの上段から下段の列に向けて,一列ずつ順次に露光が行われている。また,プロジェクタはレーザ走査方式のものを用いる。同方式のプロジェクタは,コリメートされたレーザ光源を内蔵された2次元MEMSミラーによって,スキャンライン方式で映像を投影する。MEMSミラーの振動周期は垂直方向に比べて水平方向は十分高速であるため,本研究ではプロジェクタは水平な1行の光を上段から下段の列に向けて順次照明するものとして扱う。

さらに,カメラとプロジェクタは平行化された位置に設置されているものとし,プロジェクタがあるエピポーラ面に沿って照明を照射するとき,カメラが同一のエピポーラ面を撮影し,そのままエピポーラ面を共有しながら上下にスイープする。このときカメラで観測される光線にはエピポーラ光だけが含まれており,結果としてエピポーラ画像を得ることが出来る5)。この原理を応用し,本研究では,プロジェクタとカメラの同期に意図的に遅延時間を挿入することで,照明と観測が一定の距離を保ったまま撮像する。これにより,一定の距離からの間接光成分だけを撮像することが可能となり,その結果として様々な性質の間接光を選択的に取得することができるようになる。

まず,本研究で用いるプロジェクタ-カメラシステムについて説明する。図1に示すようにプロジェクタとカメラを隣り合って設置する。また,プロジェクタとカメラはそれぞれ,ピンホールモデルを仮定する。プロジェクタのスクリーン座標系を(uv),カメラのスクリーン座標系を(st)とおくとき,プロジェクタのある行uを通るエピポーラ平面に当てた照明がシーンから反射し,カメラのピクセル(st)を通る光線として観測されるとき,本稿ではその光の伝搬をPlane-to-Rayライトトランスポートと呼ぶ。

シーンで1度しか反射しない,いわゆる直接光は必ずプロジェクタで照明したuに対応するエピポーラ面を通って観測される。一方で,シーンで複数回の反射や散乱を生じる間接光は,必ずしもカメラと同じエピポーラ面に到達するわけではなく,むしろ大部分はプロジェクタの照明と異なる行に対応するエピポーラ面を経由してカメラで観測される5)。このようにシーンにおける直接光や間接光は,照明を当てるエピポーラ面とカメラで観測するエピポーラ面との相対的な距離によって特徴付けられる。

同じカテゴリの連載記事

  • 竹のチカラで紫外線による健康被害を防ぐ 鹿児島大学 加治屋勝子 2024年12月10日
  • 光周波数コムを用いた物体の運動に関する超精密計測と校正法 東北大学 松隈 啓 2024年11月10日
  • こすると発光色が変わる有機結晶の合理的創製 横浜国立大学 伊藤 傑 2024年10月10日
  • 光ウェアラブルセンサによる局所筋血流と酸素消費の非侵襲同時計測 明治大学 小野弓絵 2024年09月10日
  • 関心領域のみをすばやく分子分析するラマン分光技術 大阪大学 熊本康昭 2024年08月12日
  • 熱画像解析による土壌有機物量計測技術の開発 大阪工業大学 加賀田翔 2024年07月10日
  • 組織深部を可視化する腹腔鏡用近赤外分光イメージングデバイスの開発 (国研)産業技術総合研究所 髙松利寛 2024年06月10日
  • 8の字型構造の活用による高効率円偏光発光を示す第3世代有機EL材料の開発 名古屋大学 福井識人 2024年05月07日