東大,視線を高精度で予測する手法を開発

東京大学の研究グループは,頭部装着型カメラにより記録された「一人称視点映像」から,人の視線の動きをこれまでにない精度で予測する手法を開発した(ニュースリリース)。

人の詳細な行動の理解には,人がいつ何に注意を向けているのかを知ることが重要となる。映像から人の視線がどう動くかを予測できれば,視線計測デバイスなどの特殊な装置を用いることなく人が何をどう見ているのかを知ることが可能となる。

一方,人の視線の動きはその人物が行っている作業に強く依存することが知られていたが,既存の一人称視点映像からの視線予測手法では,この作業依存性が考慮されていなかった。

今回,例えば人がキッチンで料理をする中で,どのタイミングでどのような物からどのような物へ視線を動かすのかを,その作業中に記録した一人称視点映像と視線データから事前に学習することにより,新たな映像から,これまでにない精度で視線移動を予測することに成功した。

提案手法は,前段のS-CNN(映像の各カラー画像フレームを入力とする畳み込み型ニューラルネットワーク)とT-CNN(映像から計算されたオプティカルフローと呼ばれる動き成分を入力とする畳み込みニューラルネットワーク)によるエンコード部分に加え,後段の視覚的顕著性に基づく視線予測モジュールと,今回新たに提案する視覚的注意移動予測モジュールによるデコード部分で構成され,最終的に両方のモジュールからの出力を統合ネットワークで統合することで視線位置の予測マップが得られるというもの。

この技術は,一人称視点映像解析の研究で用いられている標準ベンチマークデータセットを利用した評価実験により,最新の既存の視線予測手法と比較して,提案手法がより高い精度で視線位置を予測できることが確認された。

研究グループではこの技術について,ものづくりの現場における技能の伝承や,自閉症スペクトラム障害の早期スクリーニング,自動車運転時の運転手の視認行動分析など,広く人の行動のセンシングと解析に関わるさまざまな分野での活用が期待されるとしている。

キーワード:

関連記事

  • デクセリアルズ、AIデータセンター向け光半導体の国内生産を増強

    デクセリアルズは、グループ会社のデクセリアルズ フォトニクス ソリューションズ(DXPS)が計画する、生成AI・次世代データセンター向け光半導体の国内生産体制強化事業が、経済産業省の「大規模成長投資補助金」に採択されたと…

    2026.11.13
  • 核融合・光電融合・量子・宇宙、次世代成長市場の技術が集結 Photonics Innovation 2026開催

    次世代エネルギーとして期待される核融合、AIインフラの進化を支える光電融合、実用化に向けた開発が進む量子コンピューター、そして民間企業の参入が相次ぐ宇宙ビジネス。いずれも将来の成長市場として投資家の関心を集める分野であり…

    2026.10.28
  • 左 従来の光トランシーバー搭載スイッチ図 右 CPO技術搭載スイッチ 

    KDDIとBroadcom、CPO技術の共同検証を開始 AIデータセンターの省電力化へ

    KDDIは米Broadcomと、AIの社会実装に向けてネットワークインフラ技術に関する提携を締結し、両社は光通信部品を半導体チップの近くに配置する「CPO(Co-Packaged Optics)」技術の共同検証を開始した…

    2026.10.26
  • 「エッジAI半導体を実現する3Dヘテロ集積技術」プロジェクトの対象技術と課題

    東北大、半導体3D集積の産学連携組織「T-CHIPS」発足 光チップの異種集積も視野

    東北大学は、半導体先端パッケージングと異種チップ集積技術の研究開発を推進するコンソーシアム「T-CHIPS」が発足したと発表した(ニュースリリース)。プロセッサーやメモリ、シリコンフォトニクスチップなど、異なる機能を持つ…

    2026.10.21
  • 光ファイバセンシングを活用した漏水位置特定システム

    NTT、光ファイバセンシングとAIで水道管の漏水位置を15分で特定

    NTTは、福岡市管工事協同組合と共同で、光ファイバセンシングとAIを組み合わせた水道管の漏水位置特定技術の実証に成功した。地下に埋設された給水管から生じる微弱な振動を光ファイバで検出し、AIで解析することで、水平誤差75…

    2026.10.21

新着ニュース

人気記事

編集部おすすめ

  • オプトキャリア