Epoch AI 'InnovationEval' "최신 모델도 인간의 알고리즘 혁신에 필적하기 어려워"(커뮤니티 전언)

무슨 일인가

Epoch AI의 InnovationEval은 AI가 아이디어 구상부터 구현·실험·분석까지 직접 수행해, 인간이 개발한 사후 학습 기법 SDPO에 필적하는 새 방법을 만들 수 있는지 검증하는 평가다. Claude Fable 5와 GPT-5.6 Sol에 평가 1회당 3,000 GPU시간과 100억 토큰을 허용했다. 커뮤니티 요약에 따르면 두 모델 모두 인간 수준의 알고리즘 혁신에 이르는 데 어려움을 겪었다.

의미

AI가 스스로 연구를 수행해 성과를 낸다는 주장이 많아진 가운데, 실제 '새로운 기법 창출' 능력에는 아직 한계가 있다는 반대 근거가 될 수 있다.

출처

• 커뮤니티 최신 AI 모델들, 인간의 알고리듬 혁신에 필적하는 성과를 내는 데 어려움 겪어 GeekNews