AI 모델 성능 평가 플랫폼 아레나(Arena)가 상용 서비스 출시 8개월 만에 연간 매출 1억 달러(약 1300억 원)를 기록했다. 2023년 캘리포니아대학교 버클리 캠퍼스(UC Berkeley)의 연구 프로젝트에서 시작한 아레나는 업계에서 가장 널리 사용되는 AI 리더보드 제공업체로 부상했다.
아레나는 100만 건 이상의 사용자 평가를 바탕으로 생성된 크라우드소싱 방식의 AI 모델 성능 리더보드로 유명하다. 사용자는 플랫폼에 프롬프트를 입력하면 두 개의 AI 모델이 응답하고, 어느 모델이 더 우수한지 평가하는 방식으로 운영된다. 공개 리더보드는 무료로 제공되지만, 아레나는 지난 9월 'AI 평가(AI Evaluations)' 상용 서비스를 출시해 수익을 창출하기 시작했다. 이 서비스는 모델 개발사와 기업에 커뮤니티 기반의 상세한 성능 분석 데이터를 제공한다.
아나스타시오스 앙겔로풀로스(Anastasios Angelopoulos) 아레나 공동 창립자 겸 최고경영자(CEO)는 현재 많은 사람들이 아레나를 여전히 「오픈소스 프로젝트」로 인식하고 있다며, 회사의 수익성을 모르는 경우가 많다고 언급했다. 동사는 「소비 기반(consumption)」 비즈니스 모델을 채택하고 있어 순환 매출이 아닌 사용량에 따른 수익을 올리고 있다.
아레나의 성장은 AI 업계의 포스트 트레이닝 최적화 수요 증가를 반영한다. 경쟁사 유뽀(Yupp)가 3월 문을 닫은 가운데, 아레나는 머커(Mercor), 서지(Surge), 스케일 AI(Scale AI) 같은 인적 라벨링 회사들과 같은 시장에서 경쟁 중이다. 지난 1월 시리즈 A 펀딩에서 17억 달러의 기업가치로 1억 5000만 달러를 조달했을 당시 아레나의 연간 매출은 3000만 달러였다.
아레나는 텍스트, 코딩, 비전, 이미지 생성 등 다양한 작업에서 AI 모델들을 순위 매기며, 최근 도입한 '에이전트 모드(Agent Mode)'를 통해 복잡한 장기 실행 작업도 평가 대상으로 삼았다. 공동 창립자로는 앙겔로풀로스 외에 웨이린 창(Wei-Lin Chiang) 최고기술책임자(CTO)와 UC 버클리 교수이자 데이터브릭스(Databricks) 공동 창립자인 이온 스토이카(Ion Stoica)가 있다.