Kimi K3の高性能、Anthropic Fable盗用説に専門家が否定的見解

मूल शीर्षक: Experts say exploiting Anthropic’s Fable isn’t how Kimi K3 got so good

यह क्यों महत्वपूर्ण है

中国AIモデルの開発手法をめぐる米政府の主張に専門家が異議を唱えており、今後のオープンウェイトモデル規制論議に影響する可能性がある。

米国の白宮科学顧問Michael Kratsiosは、中国企業MoonshotがAnthropicのFable LLMを蒸留して大型オープンウェイトLLM「Kimi K3」を開発したと主張した。しかし複数の専門家はこの見解に懐疑的な立場を示している。

白宮科学顧問のMichael Kratsiosは、中国企業MoonshotがAnthropicのFable LLMをコピーし、輸出規制の対象となるチップを使用してKimi K3を開発したと主張した。Kratsiosは「米国の独自技術を盗むことを目的とした大規模な秘密の産業的蒸留は受け入れられない」とX上に投稿した。財務長官Scott Bessentも「米国の大型言語モデルの透かしが多くの中国モデルで発見されている」と発言したが、その透かしの詳細は明らかにされていない。Moonshot側は訓練プロセスに関する質問には回答しなかった。

一方、専門家たちはこの蒸留説に懐疑的だ。Laude InstituteのBraden Hancock氏は「Fableが公開されたのは7月1日であり、2週間でそれほどの量のデータを蒸留し、モデルを訓練してリリースする時間は物理的にない」と指摘した。Allen Institute for AIの研究者Nathan Lambert氏も「中国モデルがフロンティアに近づくにつれ、蒸留の影響は小さくなっている」と述べ、教師ありファインチューニング(SFT)だけではKimi K3のような性能は再現できないと説明した。

Lambert氏によれば、SFTはモデルが「マナーを身につける」段階に過ぎず、Fableレベルの能力を蒸留するには強化学習技術が必要になるという。専門家の見解は、Kimi K3の高性能は単純な蒸留では説明できないことを示している。

स्रोत

techcrunch.com — मूल लेख पढ़ें →