Artificial Analysis、Nemotron 3.5 の評価を公開

AI モデルの評価を手がける Artificial Analysis は 10 月 15 日、NVIDIA が同じ日に公開した「Nemotron 3.5 Super VL」と「Nemotron 3.5 Bolt 74B-A9B」の評価を公開しました。総合の指標 Intelligence Index で、Super VL は 26.5 点と、米国の会社の重みを公開したモデルで最も高い点数でした。

要点

• Super VL は、Thinking Machines の Inkling Small(25.7)をわずかに上回りました。
• 前の世代の Nemotron 3 Super(13)の 2 倍の点数で、出力のトークンは約 60% 少なくなりました。
• Bolt 74B-A9B は 21 点で、約 7 倍の大きさの Nemotron 3 Ultra(23)に迫りました。
• 長い入力での出力は毎秒約 630 トークンで、20 点以上のモデルで最も速かったとしています。
• 4 ビットの NVFP4 版の点数は、元の BF16 版との差が 0.1 点以内でした。
• 重みを公開したモデル全体では、中国の MiMo-V2.6-Pro(46)などが上でした。

Bolt は 100B より小さいモデルの中で 4 位、米国の会社のモデルでは 1 位でした。Nemotron 3 Ultra と比べると、業務の自動化の評価 AutomationBench-AA では Bolt が上回りましたが、長い文章の読み取りや難問の評価では下回りました。速さは、DeepInfra の公開前の環境で 10 万トークンの入力を使って測ったものです。

NVIDIA と協力する H Company も同じ日に、Super VL をコンピューターの操作向けに追加で学習した「Holotron4-Super-Preview」の途中の結果を公開しました。パソコンの操作の評価 OSWorld で 51.9% から 77.0% に、業務の自動化の評価 AutomationBench で 23.0% から 40.9% に上がったとしています。Nemotron 3.5 の公開については、NVIDIA、Nemotron 3.5 Super VL と Bolt を公開にまとめています。

日本の利用者にとって

発表では、日本語の性能には触れていません。Hugging Face のモデルの説明では、どちらのモデルも対応する言語に日本語が含まれています。

YOBITSUGI AI で使えるか

これはベンチマークの結果の発表です。結果に出ているモデルは、いずれも現時点の YOBITSUGI AI の対応モデルには含まれていません。

出典

• NVIDIA Releases Nemotron 3.5 Super and Nemotron 3.5 Bolt(Artificial Analysis Articles・2026年10月15日)
• Lab Notes: Post-training Nemotron 3.5 Super VL 120B-A12B for computer use(H Company Newsroom・2026年10月15日)