NvidiaがオープンなAIエージェント向けモデルを公開 — 120Bパラメータながら動くのは12B分だけ、同等モデル比5倍のスループットを主張
DRANK

10月16日、The Decoderが「Nvidia's Nemotron 3.5 Super VL is an open model built to run enterprise AI agents nonstop」と題した記事を公開した。同等サイズのオープンモデルと比べてエージェントタスクのスループットが最大5倍——しかしモデルは1200億パラメータを持ちながら、実際に動くのは12B分だけという逆説的な構造が、その速度を支えている。Nvidiaが公開した「Nemotron 3.5 Super VL」は、エンタープライズ向けAIエージェントを常時稼働させることを主眼に設計されたオープンマルチモーダルモデルだ。

by @tf_official
Related Topics: AI Machine Learning Deep Learning