理科大,単一光子検出型撮像のブレを抑制

出典:IEEE Xplore https://ieeexplore.ieee.org/ document/9354174

東京理科大学の研究グループは,次世代の撮像技術として期待される単一光子検出型撮像方式の時間解像度の高さを生かし,光子の少ない暗い環境でも被写体ブレを抑制する新たな画像再構成法を開発した(ニュースリリース)。

単一光子検出型イメージセンサは入射光子の情報を,光子が検出されたか否かに基づいて各ピクセルで二値化し,ビットプレーン画像として記録する。大量のビットプレーン画像を取得し,それらを累積させるという単純な手法でマルチビット画像に変換することができる。また,用途に応じて再構成法を選べる利点もある。

時間軸に沿ったビットプレーン画像が累積することでSN比が改善されるが,動く被写体を撮影する際に被写体ブレが問題となる。そこで研究グループは,光子の少ない環境下でも被写体の細部まで鮮明に映すことができるマルチビット画像を再構成する手法を開発することを目的に研究を行なった。

被写体ブレの抑制には,動きを正確に推定することが必要となる。そこで研究グループは,ビットプレーン画像に基づき,直接かつ正確に動きを推定する手法を提案した。従来は,少数のビットプレーン画像を変換して得られたマルチビット画像に基づいて,間接的に被写体の動きを推定していたが,光量が減少し,被写体の動きが増加することから,画質が劣化して正確な動きの推定は難しいという問題があった。

それに対し,提案手法では多数のビットプレーン画像による入射光子の数の時間的変動に基づいて,高精度な動き情報を取得することができまる。ポイントは,被写体の動きに合わせて被写体ブレを抑制するという点にある。

具体的には,似た動きによってグループ化される領域を動きボケ除去処理の単位として扱うことで,部分的に動きボケ除去された画像を得ることができる。この手法では動きに基づいて補正をかけるため,被写体の動きが途中で変わるケースや複数の動く被写体が重なり合っているケースなどにも対応でき,被写体の領域を指定する必要もない。

この手法による推定の結果,1フレームあたりの平均入射光子数が0.1という暗い環境でも,位置合わせのズレの誤差は1画素未満と,マルチビット画像に基づいて動きを推定する従来の手法に比べ,正確であることが示されたという。また,動きボケ除去に加えてノイズ除去処理を行なうことで,被写体ブレを抑えたままピーク信号対雑音比がさらに1.2dB改善したとする。

研究グループはこの手法が,宇宙空間などでの高画質映像や,現在のハイスピードカメラを超える超スーパースロー映像を撮るための技術につながるとしている。

キーワード:

関連記事

  • 茨城大、低価格なマグネシウムシリサイドで赤外センサーを開発

    茨城大学の研究グループは、資源が豊富な元素からなるマグネシウムシリサイド(Mg2Si)を用いて、波長2.1µmまでの近赤外領域に感度をもつ赤外イメージセンサーの開発に成功した(ニュースリリース)。 波長0.9~2.5 µ…

    2026.04.07
  • 東北大、光量適応信号選択機能を有する3次元積層型CMOSイメージセンサーを開発

    東北大学の研究グループは、露光期間中にフォトダイオード(PD)から溢れた光電荷を蓄積する横型オーバーフロー蓄積容量(LOFIC)を、画素毎に2段設けてダイナミックレンジを拡大するとともに、光量に応じて適切な信号を読み出す…

    2026.01.07
  • フォトロン、5,280fpsの撮影速度を実現したハイスピードカメラを発売

    フォトロンは、小型軽量の筐体に高解像度・高感度のイメージセンサーを搭載したハイスピードカメラ「FASTCAM Mini W5/W2」を発売すると発表した(製品ページ)。 「Mini W5」は、従来機種と比較しフルHD解像…

    2025.12.22
  • 富士フイルム、世界初のKrF露光対応PFASフリー材料でイメージセンサーの超微細化と高感度化を両立

    富士フイルムは、イメージセンサー用カラーフィルター材料「Wave Control Mosaic」の新製品として、世界で初めてKrF露光に対応した材料を発売した(ニュースリリース)。 イメージセンサーはスマートフォンや車載…

    2025.12.18
  • ソニー、車載用CMOSイメージセンサーを商品化

    ソニーセミコンダクタソリューションズは、業界で初めてMIPI A-PHYインターフェースを内蔵したCMOSイメージセンサー「IMX828」を車載カメラ向けに商品化すると発表した(ニュースリリース)。サンプル出荷時期は20…

    2025.11.13

新着ニュース

人気記事

編集部おすすめ

  • オプトキャリア