a16z出資のVals、AI벤치마크 표준화 도전

원제: Vals, backed by Andreessen Horowitz, is looking to become the gold standard for AI benchmarking

왜 중요한가

AI 평가 시장의 신뢰성 문제가 커지는 상황에서、독립적인 실무 중심 벤치마크 서비스의 수요는 기업 AI 도입 확대와 함께 더욱 증가할 전망이다。

AI 벤치마킹 스타ート업 Vals가 2026년 8월에 Andreessen Horowitz 주도로 4,000만 달러의 Series A 자금을 조달했다. 2024년 창업한 이 회사는 법률·금융·코딩 등 산업별 실무 능력을 평가하는 비공개 테스트 방식을 채택하며、기존 학술 벤치마크의 한계를 극복하겠다는 목표를 내세우고 있다。

AI 기업들이 자사 모델의 우수성을 홍보하는 데 벤치마크를 활용하는 관행이 일반화된 가운데、기존 평가 시스템의 신뢰성에 의문이 제기되고 있다。많은 레거시 벤치마크가 공개적으로 테스트 내용을 공개하기 때문에、기업들이 해당 테스트에 맞춰 모델을 훈련시키는 이른바 '시험 커닝' 문제가 있다는 지적이다。

Vals는 이 문제를 정면 돌파하겠다고 나섰다。공동창업자 Rayan Krishnan(25세)은 Stanford 재학 시절 Microsoft 및 동 대학 AI 연구소에서 일했으며、Palantir 인턴 경험도 보유하고 있다。그는 "학술 벤치마크가 급격히 발전하는 모델 최전선을 따라잡지 못하고 있다"고 창업 배경을 설명했다。

Vals의 차별점은 테스트 내용을 비공개로 유지하는 것과、일반 지식 측정이 아닌 실무 업무 수행 능력 평가에 집중한다는 점이다。"모델이 인간과 동등한 품질의 결과물을 각 도메인에서 실제로 산출할 수 있는가"를 기준으로 삼으며、긍정적 성과뿐 아니라 부정적 결과도 함께 검증한다고 밝혔다。

자금 조달 이력을 보면、먼저 8VC와 Bloomberg Beta가 주도한 시드 라운드를 확보했고、이어 Andreessen Horowitz 주도의 4,000만 달러 Series A를 마감했다。현재 샌프란시스코 Folsom Street의 2층 사무실을 거점으로 운영 중이다。

출처

techcrunch.com — 원문 읽기 →