NEDOら,カメラデータから顔データ含むコーパス作成

新エネルギー・産業技術総合開発機構(NEDO)と東京電機大学は,グループコミュニケーション時の人の表情などの映像や音声,各種センサーによる体の動きなどのデータセット(コーパス)をDVDに収録し,大学や企業の研究機関向けに2月7日より提供を開始した(ニュースリリース)。

NEDOは,2017年度に「次世代人工知能技術の社会実装に関するグローバル研究開発」の先導研究テーマの一つとして,東京電機大学とともに,次世代AIの深層学習のための大量データを収集・整理し,時系列分析技術の確立とデータへの注釈付け(アノテーション)の半自動化を目指したプロジェクトに取り組んでいる。

DVDに収録されているのは,東京電機大学の学生6人による議論2セッション,社会人6人による議論2セッションの合計100分のグループディスカッションに関するコーパス。従来のコーパスは,個人情報保護の観点から個人の顔データを含めることが不可能だったが,今回,実験協力者の同意を得ることで,その課題を解決した。

各ディスカッションには,個人の振る舞いを正面から観察するためのカメラを3台,ディスカッションの様子を俯瞰するカメラを1台,360度のパノラマ画像を撮影するカメラを1台,着座位置・顔の向きを見るためのカメラを天井に1台配置して撮影したほか,ヘッドセットマイクで音声も収録している。

複数のカメラで同時撮影したデータにより,多方向からのコミュニケーション観察が可能であり,音声は個人ごとに収録しているため参加者個々の発言を選択して分析できる。さらに,加速度・角速度センサーを参加者の頭部,胸部,両腕部の計4カ所に装着し,体の動きや姿勢などのデータも収録している。

コーパスには発言,ジェスチャー,視線などの行動に対してのラベル付けがされているため,会話分析にも利用可能。加えて,機械学習を用いた行動認識システムの学習データとしても活用できるという。

コーパスの活用により,コミュニケーション行動をより総合的に解析することが可能となるため,人と人との円滑なコミュニケ—ションを支援する次世代AIの研究開発の加速のほか,人のコミュニケーション能力向上のための研究促進が期待されるとしている。

キーワード:

関連記事

  • 核融合・光電融合・量子・宇宙、次世代成長市場の技術が集結 Photonics Innovation 2026開催

    次世代エネルギーとして期待される核融合、AIインフラの進化を支える光電融合、実用化に向けた開発が進む量子コンピューター、そして民間企業の参入が相次ぐ宇宙ビジネス。いずれも将来の成長市場として投資家の関心を集める分野であり…

    2026.10.28
  • 左 従来の光トランシーバー搭載スイッチ図 右 CPO技術搭載スイッチ 

    KDDIとBroadcom、CPO技術の共同検証を開始 AIデータセンターの省電力化へ

    KDDIは米Broadcomと、AIの社会実装に向けてネットワークインフラ技術に関する提携を締結し、両社は光通信部品を半導体チップの近くに配置する「CPO(Co-Packaged Optics)」技術の共同検証を開始した…

    2026.10.26
  • 「エッジAI半導体を実現する3Dヘテロ集積技術」プロジェクトの対象技術と課題

    東北大、半導体3D集積の産学連携組織「T-CHIPS」発足 光チップの異種集積も視野

    東北大学は、半導体先端パッケージングと異種チップ集積技術の研究開発を推進するコンソーシアム「T-CHIPS」が発足したと発表した(ニュースリリース)。プロセッサーやメモリ、シリコンフォトニクスチップなど、異なる機能を持つ…

    2026.10.21
  • 光ファイバセンシングを活用した漏水位置特定システム

    NTT、光ファイバセンシングとAIで水道管の漏水位置を15分で特定

    NTTは、福岡市管工事協同組合と共同で、光ファイバセンシングとAIを組み合わせた水道管の漏水位置特定技術の実証に成功した。地下に埋設された給水管から生じる微弱な振動を光ファイバで検出し、AIで解析することで、水平誤差75…

    2026.10.21
  • 東大が挑むAI×先端レーザー加工 Photonics Innovation 2026 プレイベントを開催

    オプトロニクス社は、11月10日(火)~12日(木)にパシフィコ横浜で光技術展示会「Photonics Innovation 2026/パワーレーザーPlus 2026」を開催する。そのプレイベントとして、東京大学 物性…

    2026.10.09

新着ニュース

人気記事

編集部おすすめ

  • オプトキャリア