Remote Labor Index 원격 노동 지수
원격 노동 지수(RLI, Remote Labor Index)는 AI 에이전트가 실제 프리랜서 프로젝트를 처음부터 끝까지 맡아 고객에게 납품할 만한 수준으로 끝내는 비율을 재는 평가 지표다. 지식이나 문제 풀이가 아니라 돈을 받는 실무를 통째로 해내는 능력을 본다.
무엇인가
RLI는 미국 AI 안전센터(Center for AI Safety)와 스케일 AI가 처음 공개한 AI 에이전트 평가 지표다. 게임 개발, 제품 디자인, 건축, 데이터 분석, 영상 제작처럼 여러 분야에서 실제 전문가가 완료한 프로젝트 240개로 만들었다. 이 중 230개는 비공개 평가에 쓰고 10개만 공개 예시로 내놓는다. 전체 작업량은 6000시간이 넘고 프로젝트의 총가치는 14만 달러 이상이라고 소개됐다. 작업 시간이 100시간을 넘거나 비용이 1만 달러를 웃도는 어려운 과제도 들어 있다.
어떻게 작동하나
AI에게 작업에 필요한 자료와 도구를 주고 프로젝트 하나를 맡긴다. 프로젝트 하나에 쓸 수 있는 실행 비용은 최대 30달러로 제한된다. AI가 낸 결과물은 전문가가 만든 완성본과 나란히 놓고, 평가자 3명이 실제 고객에게 납품할 수 있는 수준인지 직접 판정한다. 사람 전문가와 같거나 더 낫다고 인정받은 프로젝트의 비율이 그 모델의 '자동화율'이 된다.
RLI 평가가 진행되는 순서
- 1프로젝트 맡기기자료와 도구를 함께 제공
- 2결과물 만들기실행 비용은 최대 30달러
- 3완성본과 대조전문가가 만든 결과물과 비교
- 4평가자 판정3명이 납품 가능 여부 판단
- 5자동화율 집계사람 수준 이상인 비율
왜 주목받나
RLI가 처음 공개된 2025년에는 마누스(Manus)의 2.5%가 최고 기록이었다. 최신 결과에서는 앤트로픽의 클로드 페이블 5.2가 41.3%로 가장 높았고, 클로드 오퍼스 5.5가 21.3%, GPT-6 아스트라가 20.8%로 뒤를 이었다고 발표됐다. 직전 세대인 페이블 5.1의 17.9%와 비교하면 두 배가 넘는다. 1년 사이 '40개 중 1개'에서 '5개 중 2개' 수준으로 뛰었다는 점에서, AI가 문제 하나를 푸는 단계를 넘어 복잡한 실무를 통째로 해내는 쪽으로 가고 있다는 신호로 받아들여진다.
모델별 RLI 자동화율
알아 둘 점
41.3%는 프리랜서 일자리의 41.3%가 사라진다는 뜻이 아니다. 평가 대상 프로젝트 가운데 AI 결과물이 사람 전문가와 같거나 더 낫다고 인정받은 비율일 뿐이다. 성공 사례는 음향 효과 제작, 이미지 생성, 보고서 작성, 데이터 검색 쪽에 몰렸다. 반대로 품질이 모자라거나, 작업을 끝내지 못하거나, 요구한 파일 형식을 지키지 못하는 실패도 나왔다. 또 같은 이름(Remote Labor Index)이 2020년 코로나19 경제 연구에서 '직업별로 재택근무가 얼마나 가능한가'를 재는 지수로도 쓰였으니, AI 평가 맥락의 RLI와 헷갈리지 않아야 한다.
예시
한 회사가 영상 편집이나 데이터 분석 외주 일부를 AI 에이전트에 맡길지 검토한다고 해 보자. 담당자는 일반 벤치마크 점수보다 RLI처럼 실제 납품 수준을 기준으로 한 결과를 참고해, 어떤 모델이 어떤 종류의 일감에서 쓸 만한지 감을 잡을 수 있다. 예를 들어 페이블 5.2가 RLI에서 41.3%를 기록했다는 소식은 '열에 네 건 정도는 고객에게 그대로 넘길 만했다'는 뜻으로 읽을 수 있다. 다만 성공이 음향 효과·이미지·보고서·데이터 검색 쪽에 몰렸다는 점을 보고, 자기 회사 업무가 그쪽에 가까운지 따로 확인해야 한다.
함께 보면 좋은 용어
참고
- AI, 프리랜서 업무 41.3% 전문가 수준 수행…1년 전 2.5%서 급상승 (AI타임스)
- Supply and demand shocks in the COVID-19 pandemic: An industry and occupation perspective (arxiv.org)
- Anthropic's Claude Fable 5.2 completes 41% of real freelance jobs on the Remote Labor Index, double the next model (MLQ.ai)
- Anthropic’s Fable 5.2 Does 41% of Freelance Jobs in RLI Test (FourWeekMBA)