Vals AI가 공개한 Science Index는 BioMysteryBench, MysteryMechanism, TerminalBench Science를 같은 비중으로 평균해 21개 모델의 과학 작업 성과를 비교한다. 공개 표에서 Astra는 65.09점, Sol은 59.63점, Sonnet 5.5는 59.12점을 기록했다. 다만 분야별 선두가 달라 모든 평가를 지배하는 단일 모델은 없었다. 이 점수는 제한된 벤치마크의 문제 해결 성과로 실제 과학 발견의 성공 확률이나 모든 실험 업무의 신뢰도를 뜻하지 않는다.
테크로 돌아가기
테크
Vals Science Index, 과학 작업별 AI 모델 성과 비교
종합 순위만 보지 말고 실제 연구 분야와 가까운 과제의 점수 및 평가 한계를 확인해야 합니다.