apps 研究開発成果

chat ニュース

settings モジュールとデータ

人工知能の先端的要素機能のソフトウェアモジュール、および、そうしたモジュールを学習するためのデータセットを構築しています。GitHub 上で公開されているもの、共同研究等でご利用いただけるものなどがあります。

モジュールやデータを利用した共同研究のお問合せ先：
情報・人間工学領域研究戦略部・連携担当（ith-liaison-ml＠aist.go.jp）

• menu観測・データ収集モジュール
  chevron_right 人の関心推定モジュール​ 関心とは、その人が心の中で重要、あるいは何らかの価値があると感じたときに示す行動です。認知科学では人の行動決定は広義の価値計算に依存すると考えられています。そのため、他者の関心が推定できるなら、その人物の行動予測や好みの推定ができるようになります chevron_right Poseidon-N1 様対話的なアンケートによるデータ収集とレコメンド等の介入を行うアプリケーションの開発環境（共同研究に基づくライセンス中） chevron_right 投票クラスタリング（voteclustering） 投票クラスタリングは、大規模な自由記述回答の集計に対応できるように設計された、ウェブアンケートシステムである chevron_right Multi Cross Data Binder (MCDB) 様々な種類のデータを扱うことができるデータ統合基盤プログラム（共同研究に基づくライセンス中） chevron_right 人流計測＋シミュレーション​ 人流計測技術と群集流動シミュレーション技術を統合することによって大規模な人の流れを分析できるようなモジュールを開発 chevron_right データ知識構造化支援システム v.1.0 介護者の知識と経験を構造化し人工知能で支援する技術体系を開発することにより、介護者の人材育成効率化とパフォーマンス向上を実現 chevron_right ​AiCAN (Assistant of intelligence for Child Abuse and Neglect) 子どもの虐待対応における重篤度クラスタリングと再発率推定が可能な確率モデリング（確率的因果推論）と、対応日数予測のための機械学習（勾配ブ−スティング）を、現場ユーザーに使いやすいよう、アプリ化したモジュール chevron_right AI自販機Reco どこにでもあるサイネージ型自動販売機に、カメラ画像に基づく人数や服装検出、心理学的な性格特性や趣向を探る対話システム、天気や時間などの外部API取得データ収集機能を携え、確率モデリング技術により、個人の特性にあった商品やオススメスポットをリコメンドします chevron_right サービス現場での簡易知識表現ツール DRAW 簡易知識表現ツールDRAWは、サービス現場の従業員がタブレットを使って簡易に状況​・原因分析、対応方法等の業務知識の記録・共有を行うツール chevron_right 気付き共有支援システムDANCE3 業務遂行に必要な情報を申し送りメッセージとして共有するビジネスSNS launch SIGVerse: 大規模インタラクションデータ収集のためのVR環境 人間とロボットのインタラクション実験を仮想環境内で実現 launch AxisVisualizer: 体幹動作の計測と評価 SNS 健康増進のための、体幹運動品質の計測と評価（Android アプリ） launch Connected Living Lab 生活支援 AI のためのデータ収集技術研究開発環境 SNS 生活観測データを収集・利活用するための基盤技術の研究開発環境（共同研究で利用可能）
• menu認識・モデル化・予測モジュール
  chevron_right 1人称ビデオの視線予測 １人称ビデオから装着車の視線（注視点）を推測​ chevron_right 筋電からの運動認識​ ウェアラブル筋電デバイスを用いた上肢動作認識 chevron_right 単極脳波信号分離 単極脳波信号から瞬き等によるアーチファクトを分離・除去 chevron_right 単極脳波信号からの想起運動識別 単極脳波信号から想起した運動を識別。運動想起にもとづく Brain Computer Interface に利用可能 chevron_right 深層ニューラルネットによる化合物とタンパク質の結合予測 ２種類の深層ニューラルネットワークを組み合わせた化合物とタンパク質の相互作用予測 chevron_right グラフニューラルネットによる化合物の物性値予測 グラフニューラルネットワークによる、分子構造からの化合物の高速な物性値予測 chevron_right １人称ビデオからのキーフレーム抽出（行列式基準版） スパース符号化による１人称ビデオからのキーフレーム抽出 chevron_right １人称ビデオからのキーフレーム抽出（複数センサ統合版） スパース符号化による１人称ビデオからのキーフレーム抽出 chevron_right 鳥瞰画像解析モジュール 人工衛星や航空機によって上空から取得された鳥瞰画像から（１）津波による流出建造物（２）メガソーラー（３）火災・工場・火山などの熱源　を自動検知するための深層学習パッケージ chevron_right Hyperspectral Salient Object Detection​ This work proposed a salient object detection model on hyperspectral images using self-supervised features; in addition, it also provides a dataset for benchmarking on hyperspectral salient object detection (HS-SOD). chevron_right RotationNet ＋ 多視点画像データセット 複数視点の画像入力から、物体の形状と姿勢を頑健に同時認識する深層ニューラルネットワーク chevron_right クラウド型画像解析エンジン 深層ニューラルネットによる画像解析をエッジ（ロボット）とサーバで分担して実行 chevron_right 動画データセット＋動作認識、説明生成（情報抽出） 時間的なアテンションを導入した高精度な動画の説明文生成 chevron_right 物体の機能認識 深層ニューラルネットワークにより、RGB-D データから、日常で使う道具（スプーン、カップ、等）の機能部位（すくう、蓄える、等）を認識 launch 人の行動を認識するための事前学習済みモデル 動画中の日常行動 400 種類の認識を学習させた事前学習済みモデル
• menu計画・制御モジュール
  chevron_right マルチモーダル予測符号化アーキテクチャMatcherNet 環境を複数の小規模モデルをつなぎ合わせたネットワークの形で表現する一般的な方法と、これを容易に実装可能なソフトウェアパッケージを開発 chevron_right 産業用ロボットのツール ヒトが行ってきた作業をロボットによって代替することを考え、特に部品供給作業と製品組立作業を題材として挙げている chevron_right 模倣学習 深層ニューラルネットワークにより、人による少数の教示から状況変化にロバストな行動を模倣学習。柔軟物の操作などのプログラムしにくい行動を実現 chevron_right 柔軟物操作 深層ニューラルネットワークを用いて自由度の高い柔軟物の操作の行動計画を自動的に生成
• menu自然言語処理・理解モジュール
  chevron_right 生命科学文献からのデータ作成をAIでアシスト 文献テキストデータから酵素反応や蛋白質間相互作用といった生命現象（生命系イベント）の情報を構造化して適切に抽出（イベント抽出） launch Jigg: 自然言語処理パイプラインフレームワーク 自然言語処理のモジュールをつないで実行するフレームワーク launch TRF: 日本語テキストの読みやすさ評価 TRF: 日本語テキストの読みやすさ評価 launch Market Reporter: 株式市場データからの市況説明文生成 株価データや為替データからの市況レポートの生成。数字の生成や、因果的説明が可能 launch ccg2lambda: テキストからの意味表現生成 英文テキストをラムダ式の意味表現に変換。自然言語によるデータベース検索等に利用可能 launch seq2seq_temporal_attention: 動画からの説明文生成 時間的なアテンションを導入した高精度な動画の説明文生成 launch 学術俯瞰システム 大規模な科学技術文献情報をテキストマイニングとネットワーク分析により自動分析し、学術分野の現状や動向の俯瞰を可能にするシステム launch 自然言語理解のための事前学習済みモデル BERT-on-ABCI 自然言語理解のための事前学習済みモデルであるBERT（Bidirectional Encoder Representations from Transformers) を、産総研のAI 橋渡しクラウド ABCI を使って構築するためのスクリプトと、バイオ分野の大規模テキストデータ（英語）で最初から学習したBERT モデル
• menu機械学習基盤モジュール
  chevron_right ロバスト主成分分析 in Python ロバスト主成分分析は、大きな外れ値に対して頑健な低ランク行列近似手法です。通常の主成分分析は外れ値に大きく影響を受けますが、ロバスト主成分分析ではスパースな外れ値に対してはその大きさによらず、正確な低ランク近似が実現できます chevron_right 行列式基準とDC計画法による解析スパース符号化 DC計画法を用いた高速な解析スパース符号化 chevron_right 確率論理プログラミング言語 PRISM 複雑な確率モデルを簡単に定義し、多様なアルゴリズムで学習・推論させることができる確率論理プログラミング言語 chevron_right スパース辞書学習を用いた時系列分解 スパース辞書学習を用いた時系列データの分解圧縮 chevron_right PLASMA pLSA によるクラスタリングとベイジアンネットの組み合わせによる、汎用の確率モデリングと確率推論（共同研究に基づくライセンス中） chevron_right 時間領域アナログ方式による海馬・扁桃体・前頭前野の物理モデル化 海馬・扁桃体・前頭前野の情報処理モデルと時間領域アナログ計算を用いた実装
• menu機械学習用データセット
  chevron_right 介護の構造化マニュアルの例 本データセットは、目的を明示的にし、常識として暗黙的であった知識を共有可能とすることを目的として構築した chevron_right 日用品データセット + 3Dデータベース 日用品やコンビニ商品を効率的に認識するための学習用 3D データ（クラウド DB として提供） launch ABCD: AIST Building Change Detection 津波による建物の変化検出学習用データ launch MUSIC: Multiband Statellite Imagery for object launch MIRO: Multi-view Images of Rotated Objects 多視点から撮影した日用品画像データ（RotationNet の学習用データ） launch STAIR Actions: A Large-Scale Video Dataset of Everyday Human Actions 100種類の日常動作の認識学習用の大規模ラベルつき動画データ。動画からの動作認識の基盤モデルである 3D-ResNet の学習用データとして利用可能 launch STAIR Actions キャプション: STAIR Actions 動画のキャプション（説明文）データ STAIR Actions 動画の一部に日本語の説明文（誰がどこで何をしている）を付与したデータセット。動画の説明文データセットとしては世界最大規模（2019/3公開時） launch Patterns_of_Beauty: 絵画の美しさの学習用データセット 絵画の構成に関する特徴量を付与したデータセット launch Part-Function Dataset: 機能属性学習用データセット 日用品や茶道具の 3次元データの部分に、機能属性（にぎる、すくう、など）を付与したデータセット