a16z支援のVals、AIベンチマークの新標準を目指す
Judul asli: Vals, backed by Andreessen Horowitz, is looking to become the gold standard for AI benchmarking
Mengapa Ini Penting
AIモデルの信頼性検証が商業的重要性を増す中、第三者ベンチマーク市場の確立が加速している。
スタートアップValsがAndreessen Horowitzの主導で4000万ドルのシリーズAを調達。法律・金融・コーディングなど業界特化型AIベンチマークの提供を目指す。
2024年に設立されたValsは、既存のAIベンチマーク体制が時代遅れになっているという問題意識から生まれた。共同創業者でCEOのRayan Krishnan（25歳）は、Palantirでのインターン経験やStanfordでのMicrosoftおよびAI研究室での勤務を経て、「新しい高性能モデルが次々と市場に投入される一方、学術系ベンチマークがその進化に追いつけていない」と指摘する。
Valsの差別化ポイントは二つある。第一に、テスト内容を公開しない点。多くの既存ベンチマークはテスト問題が公開されており、企業がそれを訓練データに使うことで「カンニング」が可能になっている。第二に、一般知識ではなく、法律・金融・コーディングなど特定業界での実務タスク遂行能力を評価する点だ。「モデルが人間と同等の品質の成果物を出せるか」をKrishnanは評価軸に据える。
資金面では、まず8VCとBloomberg Betaが主導したシードラウンドを獲得。その後、急成長を背景に先月、Andreessen Horowitz主導で4000万ドルのシリーズAを調達した。本社はサンフランシスコのFolsom Streetにある築100年超の旧醸造所ビル内に構えている。