大規模言語モデルの実装が進みつつある中、言語だけでなく画像や音声なども含めた大量のデータを学習して作られ、多種類のデータを一度に処理できる、いわゆるマルチモーダルな基盤モデルが注目されている。

完全自動運転の実現に向けてLLMを含む「マルチモーダルAIモデル」の開発を進めている。

画像と3次元(3D)データなど複数の形式のデータを学ぶマルチモーダルAIをロボットに適用する。... マルチモーダルなデータを学習させるためのアルゴリズムも開発する。

「画像認識と大規模言語モデル(LLM)の組み合わせなどマルチモーダル人工知能(AI)に注目している。

「23年末の顧客企業との会話で一番ヒットしたのは(テキストだけでなく画像や表、音声など各種データをAIが理解して処理できる)マルチモーダル機能だ。... ツヅミの特徴を生かしたソリュー...

グリッドは22日、鉄道・海上・陸上輸送を一元管理し、物流全体を効率化するシステム「リノーム・マルチモーダル」の開発に着手したと発表した。... 現実世界を仮想空間に再現するデジタル...

画像と音声、触感などのデータを統合的に解析するマルチモーダル信号を動画のフレーム単位で統合、同期し、5Gで伝送する。

LLM活用、階層別に対象学習 パナソニックホールディングス(HD)は21日、大規模言語モデル(LLM)の事前知識を活用して画像中の物体を識別する画像認...

開発者の次の関心は基盤モデルのマルチモーダル化だ。... 研究室・地域で実地運用模索 こうした中、ロボット研究者が次のテーマとして重視するのが、基盤モデルのマルチモーダル化だ。

これをマルチモーダル・コミュニケーションと呼ぶ(図1)。... こうしてマルチモーダル・コミュニケーションができるBMIをつくろうとアラヤに入社して「X Communicati...

大規模研究課題=▽層状無機固体の精密構造制御に基づく新規プロトン伝導体の創製(熊本大学)▽災害医療対応・外傷処置・外傷手術XR遠隔支援システムの開発(北海道大学)...

モノづくりなど産業分野への応用を想定したマルチモーダル化に必要な学習手法でノウハウを持つ名古屋大学も参加した。

NEC、理化学研究所、日本医科大学は13日、複数の大学病院と共同で電子カルテと人工知能(AI)の融合研究を進め、前立腺がんを対象に医療ビッグデータ(大量デー...

米グーグルはテキストやイメージなど、さまざまな種類のデータを関連づけて処理できる汎用のマルチモーダル(複数手段)大規模言語モデル(LLM)「PaLM-E(...

同サービスの搭載により、ドローン活用や公共交通の貨客混載などの「マルチモーダル」の最適化、地域物流全体の配送最適化などが期待できるとしている。

NECは、顔認証と虹彩認証を組み合わせたマルチモーダル生体認証ソリューションを発売した。従来、マルチモーダル対応では顔認証と虹彩認証を別々の装置で行っていたが、今回は両技術を一つの装置に搭載し、一度に...

NECのマレーシア現地法人であるNECマレーシアと、現地企業のアイリス・インフォメーション・テクノロジー・システムズ(IITS)は、二つ以上の認証方式を組...

NECはベトナム公安省(MOPS)に、顔と指紋を組み合わせたマルチモーダル生体認証システムを納入した。

まず、グルーヴノーツが開発するプラットフォーム(基盤)を活用し、画像と数値など異なる種類のデータを同時に学習できる「マルチモーダル深層学習」技術を用いた判別モデルを作成。... その結...

この技術は、立ち止まることなく歩きながら行うウォークスルー型の虹彩認証(写真)や、世界最高精度の顔認証技術との組み合わせによって、数千万人以上の多人数の本人確認に利用できるマルチモーダ...