物理環境を理解し動作を生成する PhysBrain 1.5、28課題で最上位の性能を示す話

論文

物理環境を理解し動作を生成する PhysBrain 1.5、28課題で最上位の性能を示す話

スポンサーリンク

PhysBrain 1.5が、28 課題で 72.5 点の平均点を達成し、オープンソースで最上位の性能を出した。

この記事のポイント

  • 28課題で平均72.5点のオープンソース最高
  • GPT-6-AstraやGemini 3.6 Flashと同等
  • 14課題でオープンソース最高を維持

数字で見る

この記事に出てくる数字

モデル規模 8B
ベンチマーク数 28
平均スコア 72.5

どこで使えるか

物理環境の理解と動作生成を自前で動かしたい人向け。8Bで商用モデルに迫る性能。 GitHubで公開済み 14ベンチでオープンソース最高

動画を見る

スポンサーリンク

解説

かみくだいて説明します

PhysBrain 1.5という新しいモデルを、DeepCybo-PhysAIという研究チームが公開しました。物理的な環境を理解して動作を生成し、未来の状態を予測する能力を一つにまとめたもので、パラメータ数は8B、28のベンチマークで平均72.5点を記録しています。
28のテストで72.5点ですか。研究の立場から見ると、従来のモデルと比べてどこが新しくなったんですか。
従来は画像と言葉を扱うモデルと、ロボットの動きを扱うモデルが別々でした。それを同じ学習枠組みに統合したのが今回の特徴です。14のベンチマークでオープンソースとして最高成績をマークし、GPT-6-AstraやGemini 3.6 Flashといった大手のモデルと互角の性能を出しています。
大手のモデルと同等の数字が出ているんですね。作る人の立場では、手元で動かすのに何が要りますか。
公開されているコードと学習済みの重みを使えば、人間の操作動画から得た初期値を引き継げます。そのあと、人間のデモやロボットの実データ、シミュレーションの経験を混ぜたデータで追加学習する形で使います。
追加学習で自分の環境に合わせられるんですね。使う側の立場では、モデルが実際に出力するものは何が変わりますか。
ロボットの先端部分の軌道と、その先の映像を同時に生成します。色付きの画像、奥行きを表すデータ、ロボット部分だけを切り出したマスクを、空間的に揃えた形で出力します。
色付きの画像と奥行き、切り抜き図を同じ座標で合わせるんですね。そこがまだ掴めません。
人の手元を撮影した動画で考えてみてください。動画から手の動きの軌道を読み取り、次の瞬間の手がどこにあるかを予測するだけでなく、その瞬間の背景の奥行きと、手だけを切り抜いた図を同時に作り出します。
動画の次の瞬間を、動きと奥行き、切り抜き図の三つで予測するんですね。では、学習に使う動画の具体的な件数や時間について、詳しい数字は出ているんですか。
学習に使う動画の具体的な件数や時間については、今回の公開資料には記載がありません。そこはまだ分かっていません。
最後に、このモデルの今後の展開について、見通しはありますか。
要旨には今後の展開や商用利用のスケジュールに関する記述はありません。ただし、28のベンチマークで平均72.5点を達成し、14のベンチマークでオープンソース最高を記録したことが明記されています。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文