NEDOら,カメラデータから顔データ含むコーパス作成

新エネルギー・産業技術総合開発機構(NEDO)と東京電機大学は,グループコミュニケーション時の人の表情などの映像や音声,各種センサーによる体の動きなどのデータセット(コーパス)をDVDに収録し,大学や企業の研究機関向けに2月7日より提供を開始した(ニュースリリース)。

NEDOは,2017年度に「次世代人工知能技術の社会実装に関するグローバル研究開発」の先導研究テーマの一つとして,東京電機大学とともに,次世代AIの深層学習のための大量データを収集・整理し,時系列分析技術の確立とデータへの注釈付け(アノテーション)の半自動化を目指したプロジェクトに取り組んでいる。

DVDに収録されているのは,東京電機大学の学生6人による議論2セッション,社会人6人による議論2セッションの合計100分のグループディスカッションに関するコーパス。従来のコーパスは,個人情報保護の観点から個人の顔データを含めることが不可能だったが,今回,実験協力者の同意を得ることで,その課題を解決した。

各ディスカッションには,個人の振る舞いを正面から観察するためのカメラを3台,ディスカッションの様子を俯瞰するカメラを1台,360度のパノラマ画像を撮影するカメラを1台,着座位置・顔の向きを見るためのカメラを天井に1台配置して撮影したほか,ヘッドセットマイクで音声も収録している。

複数のカメラで同時撮影したデータにより,多方向からのコミュニケーション観察が可能であり,音声は個人ごとに収録しているため参加者個々の発言を選択して分析できる。さらに,加速度・角速度センサーを参加者の頭部,胸部,両腕部の計4カ所に装着し,体の動きや姿勢などのデータも収録している。

コーパスには発言,ジェスチャー,視線などの行動に対してのラベル付けがされているため,会話分析にも利用可能。加えて,機械学習を用いた行動認識システムの学習データとしても活用できるという。

コーパスの活用により,コミュニケーション行動をより総合的に解析することが可能となるため,人と人との円滑なコミュニケ—ションを支援する次世代AIの研究開発の加速のほか,人のコミュニケーション能力向上のための研究促進が期待されるとしている。

キーワード:

関連記事

  • 【解説】光技術を巡る企業再編、M&Aから見えるフォトニクス市場の変化

    AIデータセンターの拡大、防衛・航空宇宙分野での需要、新しい光学技術の実用化を背景に、光・フォトニクス関連企業の買収や事業統合が相次いでいる。これらの動きからは、光学部品やレーザー光源の技術力に加え、半導体や電子回路、ソ…

    2026.11.18
  • imec、北海道大学に日本初の研究開発拠点 光電融合・CPO研究を推進

    ベルギーの半導体研究機関imecは11月16日、日本初となる研究開発拠点を北海道大学の札幌キャンパス内に設置したと発表した(ニュースリリース)。経済産業省の支援のもと、技術研究組合最先端半導体技術センター(LSTC)と連…

    2026.11.17
  • デクセリアルズ、AIデータセンター向け光半導体の国内生産を増強

    デクセリアルズは、グループ会社のデクセリアルズ フォトニクス ソリューションズ(DXPS)が計画する、生成AI・次世代データセンター向け光半導体の国内生産体制強化事業が、経済産業省の「大規模成長投資補助金」に採択されたと…

    2026.11.13
  • 核融合・光電融合・量子・宇宙、次世代成長市場の技術が集結 Photonics Innovation 2026開催

    次世代エネルギーとして期待される核融合、AIインフラの進化を支える光電融合、実用化に向けた開発が進む量子コンピューター、そして民間企業の参入が相次ぐ宇宙ビジネス。いずれも将来の成長市場として投資家の関心を集める分野であり…

    2026.10.28
  • 左 従来の光トランシーバー搭載スイッチ図 右 CPO技術搭載スイッチ 

    KDDIとBroadcom、CPO技術の共同検証を開始 AIデータセンターの省電力化へ

    KDDIは米Broadcomと、AIの社会実装に向けてネットワークインフラ技術に関する提携を締結し、両社は光通信部品を半導体チップの近くに配置する「CPO(Co-Packaged Optics)」技術の共同検証を開始した…

    2026.10.26

新着ニュース

人気記事

編集部おすすめ

  • オプトキャリア