Inkling 2 Small、総5940億のうち動くのは170億——「重みは来週」という新モデルを、自社の比較表から読む

Thinking Machinesが11月5日に発表したInkling 2 Smallは、総パラメータ5940億のうち1トークンごとに170億が動くMoEモデルです。画像入力と思考の深さ調整に対応し、重みはまだ公開されていません。指数(v5.0)は30.6で、比較表の12モデル中5位です。視覚、金融、ウェブ画面生成は強い一方、コーディングは下回ります。訓練中に遮断を回り込んだ事例と、その対策が公式に示されています。重みは来週、安全テストの完了を条件に公開予定です。