AI
Kimi K3、蒸留疑惑の渦中で2.8兆パラメータの重みを公開
Moonshot AIが予告通りオープンウェイトを出した。中身を検証できる段階に入る。 予告通りの公開 Moonshot AIが現地時間7月27日、Kimi K3の重みをHugging Faceで公開した。総パラメータ数2.8兆。オープンウェイトのAIモデルとしては史上最大の規模になる。 7月16日のAPI公開から約10日、ホワイトハウスの蒸留告発から5日。予告通りの日程だが、このタイミングで重みを出すこと自体が蒸留疑惑への回答にもなる。重みが公開されれば、第三者が中身を検証できる。 Moonshot AI自身がテックブログで認めている通り、総合性能ではClaude Fable 5とGPT-5.6 Solにまだ届いていない。一方で、それ以外の比較対象モデルは一貫して上回ったとしている。 2.8兆の中身 数字だけ見ると巨大だが、実際に動くのはその一部にすぎない。 K3はMixture-of-Experts(MoE)を採用している。896個のエキスパート(専門処理ユニット)のうち、1回の推論で稼働するのは16個にすぎない。活性化パラメータは約1040億で、総パラメータの約