NEDOら,カメラデータから顔データ含むコーパス作成

新エネルギー・産業技術総合開発機構(NEDO)と東京電機大学は,グループコミュニケーション時の人の表情などの映像や音声,各種センサーによる体の動きなどのデータセット(コーパス)をDVDに収録し,大学や企業の研究機関向けに2月7日より提供を開始した(ニュースリリース)。

NEDOは,2017年度に「次世代人工知能技術の社会実装に関するグローバル研究開発」の先導研究テーマの一つとして,東京電機大学とともに,次世代AIの深層学習のための大量データを収集・整理し,時系列分析技術の確立とデータへの注釈付け(アノテーション)の半自動化を目指したプロジェクトに取り組んでいる。

DVDに収録されているのは,東京電機大学の学生6人による議論2セッション,社会人6人による議論2セッションの合計100分のグループディスカッションに関するコーパス。従来のコーパスは,個人情報保護の観点から個人の顔データを含めることが不可能だったが,今回,実験協力者の同意を得ることで,その課題を解決した。

各ディスカッションには,個人の振る舞いを正面から観察するためのカメラを3台,ディスカッションの様子を俯瞰するカメラを1台,360度のパノラマ画像を撮影するカメラを1台,着座位置・顔の向きを見るためのカメラを天井に1台配置して撮影したほか,ヘッドセットマイクで音声も収録している。

複数のカメラで同時撮影したデータにより,多方向からのコミュニケーション観察が可能であり,音声は個人ごとに収録しているため参加者個々の発言を選択して分析できる。さらに,加速度・角速度センサーを参加者の頭部,胸部,両腕部の計4カ所に装着し,体の動きや姿勢などのデータも収録している。

コーパスには発言,ジェスチャー,視線などの行動に対してのラベル付けがされているため,会話分析にも利用可能。加えて,機械学習を用いた行動認識システムの学習データとしても活用できるという。

コーパスの活用により,コミュニケーション行動をより総合的に解析することが可能となるため,人と人との円滑なコミュニケ—ションを支援する次世代AIの研究開発の加速のほか,人のコミュニケーション能力向上のための研究促進が期待されるとしている。

キーワード:

関連記事

  • 電通大、次世代カメラの解像度測定と精密アライメント技術を開発

    電気通信大学の研究グループは、カメラ性能を評価する2件の新たな技術を開発した(ニュースリリース)。 1件目は、カメラの解像性能を示すMTF(変調伝達関数)を高精度に測定する技術。現在、MTF測定では黒白の境界線を用いる「…

    2026.05.15
  • NVIDIAとコーニングが提携、AIデータセンター向け光接続製品を米国で大幅増産

    米NVIDIAと米コーニング(Corning)は2026年5月6日、米国において次世代AIインフラの構築に不可欠な先進的な光接続製品の生産を大幅に拡大するため、複数年にわたる商業・技術提携を発表した(ニュースリリース)。…

    2026.05.08
  • 【解説】北海道発の光電融合パッケージ技術、半導体競争力強化の鍵となるか

    技術研究組合 最先端半導体技術センター(LSTC)が進める光電融合型パッケージ技術の研究開発は、日本の半導体戦略において重要な転換点を示している。ポスト5G時代におけるデータ通信量の爆発的増大と電力消費の課題に対し、電気…

    2026.05.05
  • Thinker、小山佳祐氏が日本機械学会賞を受賞 赤外線とAIによる近接覚センサーを評価

    Thinkerは、同社取締役であり大阪大学基礎工学研究科招へい准教授の小山佳祐氏らの研究チームが、「2025年度 日本機械学会賞(技術)」を受賞したと発表した(ニュースリリース)。  日本機械学会賞は、機械工学および機械…

    2026.05.01
  • キヤノン、新SPADセンサー搭載の超高感度カメラ「MS-510」を発売 

    キヤノンおよびキヤノンマーケティングジャパンは、低照度性能を大幅に向上させたカラー撮影用超高感度カメラの新製品として、約320万画素1.0型の新SPAD(Single Photon Avalanche Diode)センサ…

    2026.04.17

新着ニュース

人気記事

編集部おすすめ

  • オプトキャリア