エージェントAI研究チーム

データ知識融合研究チームでは、データ駆動型AIと知識駆動型AIを統合し、人間活動の背景や意味を理解するAI技術の開発を目指しています。日常生活空間における人間の活動は、人、物、それらの相互作用など様々な要素から構成され、非常に個別性の高いものです。このような個別性の高い状況を解釈するには、環境やタスク、どのような意図で何をしているのか、といった人間であれば当たり前に認識できる日常生活行動の知識が必要となります。このような知識をAIシステムに与えて日常生活を支援することは、まだ困難です。例えば、家庭用汎用ロボットや生活に埋め込まれたAIシステムには、以下のような知識が求められると考えられます。1）その家に住む個人の身体的特徴や室内環境に関する知識 2）作業を行う際の行動に関する知識（高齢者の支援方法や幼児の見守りなど） 3) 人体に関する一般的な知識、事故リスク報告、安全ガイドライン 4) サービス・プロセス。5) 対象物や事象に関する一般的な常識知識など。
AIシステムは、このようなマルチレイヤー的でヘテロな日常生活知識を、複数の時間・空間で連鎖する画像や自然言語、センサーデータなどの異なるモダリティの情報と結びつけて、推論・認識プロセスに取り込む必要があります。これらのデータや知識のマルチモダリティ性や異質性を捉え、統合するために、知識グラフ、機械学習、自然言語処理、Embodied-AI、人間-エージェント-インタラクションなどの研究に取り組んでいます。

　データ知識融合研究チームYoutubeチャンネル　

■ データ知識融合研究チームYoutube

　イベント情報　

■ ナレッジグラフ推論チャレンジ【実社会版】

Unityシミュレータ（VirtualHome2KG ）を用いてアバターに日常生活行動を取らせた動画とその動画内で起きている人・環境インタラクションの連続する時空間系列での変化を記述した知識グラフの対をデータセットして公開し、生活リスクを推論するAIシステムの性能を競うコンテストが開催されています。

■イベントURL：https://challenge.knowledge-graph.jp/2022/
■ データセット https://github.com/KnowledgeGraphJapan/KGRC-RDF/tree/kgrc4si(dataset labels are in English)

■ The 1st International Knowledge Graph Reasoning Challenge 2023
ナレッジグラフ推論チャレンジ国際版

シャーロック・ホームズの短編小説８編のテキストをイベントの系列として知識グラフに変換したデータセットが公開されています。８編の小説すべての仕掛けと犯人を当て、またその理由を説明するAIシステムの性能を競うコンテストです。国内で４回開催されたものの初の国際版です。

■ ワークショップURL: https://ikgrc.org/2023/
■ データセット：https://github.com/KnowledgeGraphJapan/KGRC-RDF/tree/ikgrc2023