本文へ移動
YOBITSUGI AIメディア
AI ニュース人が監修しながらAIを活用して執筆

Runway、ロボットを動かすPraxis-1の重みを商用可で公開

執筆・監修: 佐々木 航公開 更新 4 分で読めます

共有XFacebookLINEはてブ

カメラの映像と言葉の指示から、ロボットの腕の動きを決めるモデルを、自社の機体に合わせて作り直し、製品に組み込めるようになりました。動画生成AIのRunwayは11月11日、ロボット向けのモデル「Praxis-1」の重みを、Apache 2.0のライセンスで公開しました。重みのほか、動かすコードと追加で学習させるコードも同じ条件で、商用にも使えます。

Praxis-1は9月に発表したモデルで、これまでは提携企業だけが使えました。人型ロボット、産業用の腕、倉庫の双腕ロボットを作る会社が、自社の機体で試してきたものです。

先の映像と動きを、一緒に予測する

Praxis-1は、Runwayが「ワールドアクションモデル」と呼ぶ種類のモデルです。少し先の場面がどう見えるかを予測しながら、そこへ向かう腕の動きを一緒に出します。土台は大量の一般の動画で学ばせた動画のモデルなので、物の動き方や作業の進み方は、ロボットのデータを使う前に身に付いています。

パラメーターは合わせて272億です。動画を予測する部分は混合エキスパート(MoE)の作りで、どの入力も通る専門家1個と、128個の小さな専門家から選ぶ8個だけを使うため、1回の計算に使うのは約28億にとどまります。そこに、動きを出す約3億1,400万の部分が付き、ロボットへの指示を1秒に15回出します。

公開したのは、土台の版と、片腕のロボット(DROID)向け、2本の腕(YAM)向けに調整した版です。また、片腕向けと双腕向けには、4ビット(NVFP4)で動かすための版もあります。

動かすには、標準の16ビット(bf16)で重みだけで54.4GBあるため、メモリが80GBのGPUが1枚要ります。H100なら1枚で足り、LoRAでの追加の学習も80GBのGPU1枚でできる手順が付いています。一方で、RTX 5090のような32GBのGPU向けには、専門家の部分を4ビットに縮める試験的な方法を用意しました。重みは約23.5GBになり、32GBには収まる見込みですが、24GBのGPUでは足りません。4ビット向けに学習させた版で試すと、RoboLab-120の成功は600回中279回で、16ビットの287回からわずかに下がりました。難しい課題を集めた別の試験では、はっきり下がった例も示しています。

評価では、重みが公開されたモデルの首位

ロボット操作を測るNVIDIAの評価RoboLab-120では、Praxis-1は1,200回の試行で46.2%成功しました。9月に重みが公開されたBlack Forest LabsのFLUX 3 Actionは42.9%で、これを上回ります。

モデル会社成功率
Praxis-1Runway46.2%
FLUX 3 ActionBlack Forest Labs42.9%
Cosmos3 NanoNVIDIA36.8%
π0.5Physical Intelligence28.0%

Runwayが11月11日に載せた、NVIDIAのRoboLab-120の順位表の値(11月時点・1,200回の試行の成功率)。

学習に使っていないロボットにも合わせやすいといいます。GoogleのロボットRT-1のデータで調整すると、シミュレーションの評価SimplerEnvで成功率は80.0%になり、RT-1の元の制御の52.4%を大きく上回りました。さらに、全体を学習し直さなくても、LoRAで自社の機体やカメラ、作業に合わせられます。

読み取れること

ロボットを動かすモデルで、商用に制限のない重みは多くありません。たとえば9月のFLUX 3 Actionは7Bと小さいものの、年間の売上が500万ドル以上の会社が商用で使うには、別にライセンスを受ける必要がありました。その点、Praxis-1はApache 2.0なので、日本の機械メーカーやロボットの新興企業も、自社の機体に合わせて調整し、そのまま製品に組み込めます。Googleが11月10日に出したGemini Robotics 2.5は提携企業への提供にとどまり、開き方の違いがはっきりしました。

ただし、評価の成功率は46.2%で、半分以上の試行は失敗でした。実際の現場で使うには、自社の機体と作業のデータで調整することが前提です。また、指示の例はどれも英語で、日本語の指示で動くかは示されていません。国内では、SB Intuitionsも、先の場面を予測しながら動きを学ぶ試作モデルを研究中です。

YOBITSUGI AIで使えるか

Praxis-1は、YOBITSUGI AIでは使えません。ロボットを動かすためのモデルで、チャットや画像生成に使う種類のモデルではありません。

出典

共有XFacebookLINEはてブ