Artificial Analysis, LLM의 로봇 작업 수행 능력을 재는 벤치마크 'AA-Robotics v0.1' 공개(커뮤니티 전언)
확인된 내용 (사실)
Reddit 글에 따르면 Artificial Analysis가 LLM의 로봇 작업 수행 능력을 순위로 매기는 벤치마크 'AA-Robotics v0.1'을 공개했다. 아직 등록된 모델은 몇 개뿐이다. 글쓴이는 여러 모델이 과제 대부분을 완료하지만 속도가 매우 느리다고 전했다.
팩트체크 필요 (주장)
글쓴이는 완료 시간과 정확도를 함께 보면 GPT-6.1 Sol이 가장 낫다고 평가했다. 공식 수치는 확인되지 않았다.
의미 (해석)
범용 LLM을 피지컬 AI 작업으로 비교하는 공개 평가 기준이 생기기 시작했다.
신뢰도 낮음 · 공식 출처 확인 전