← 주요 논문

논문 리뷰 · 2026년 11월 19일

ForceHarness: 고정된 프런티어 모델이 힘 정보를 행동과 물리량으로 활용하게 하는 하네스

ForceHarness: Turning Force into Action and Physics for Frozen Frontier Models

피지컬 AI·로봇에이전트멀티모달 중급 추천 38 cs.RO Show Lab

힘 보정, 스스로 종료하는 힘 프리미티브, 물리량 번역 계층을 갖춘 하네스를 만들어, 학습 없이 API 모델이 접촉이 많은 로봇 조작을 해내게 했다.

문제

프런티어 멀티모달 모델은 이미지만으로 로봇을 zero-shot 제어할 수 있다. 하지만 나사 조이기나 무게 비교처럼 접촉력이 중요한 작업은 이미지로 알 수 없다. 기존 힘 인식 정책은 데모 데이터와 가중치 업데이트가 필요해 API 전용 고정 모델에는 쓸 수 없다. 접촉은 모델의 판단 속도보다 빠르게 변하고, 모델은 원시 힘 신호를 해석하지 못한다.

방법

세 계층으로 구성했다. ① 손목 센서 또는 관절 토크(자코비안 최소제곱)로 손에 걸리는 힘을 추정하고, 정지 상태에서 영점을 다시 잡는 보정 계층. ② 기본 임피던스 제어기 위에서 어드미턴스 제어로 힘을 유지하고 접촉 이벤트가 생기면 스스로 멈추는 12개 힘 프리미티브(접촉 탐색, 밀기, 슬라이드, 나선 탐색, 삽입, 나사 조이기, 들기 등). ③ 힘 궤적을 질량, 마찰계수, 접촉 높이 같은 물리량과 불확실성·상태 플래그로 바꿔 도구 결과로 돌려주는 번역 계층. 평가용으로 숨겨진 물리 변수를 가진 7개 과제의 MuJoCo 벤치마크 HiddenPhys도 만들었다.

결과

한계

실제 로봇 평가는 단일 로봇(Franka FR3)의 6개 과제다. HiddenPhys에서는 시각 인식을 분리하려고 물체 자세를 노이즈가 섞인 텍스트로 줬다. 지시문은 과제별로 사람이 작성하고, 프리미티브 12종도 사람이 설계했다. 모델이 수 초에 한 번 결정하므로 속도가 중요한 동적 작업에는 제약이 있을 수 있다.

의미

데모 수집이나 파인튜닝 없이 API 모델에 '촉각'을 붙이는 실용적인 설계를 보여준다. 고정 모델에는 원시 센서값보다 물리적으로 해석된 값을 주는 것이 효과적이라는 점은 다른 센서를 붙일 때도 참고할 만하다.

핵심 용어

하네스(Harness)
고정된 모델을 감싸 도구, 인식, 제어를 제공하는 소프트웨어 계층이다. 모델 가중치를 바꾸지 않고 능력을 확장한다.
임피던스·어드미턴스 제어
임피던스 제어는 목표 위치와 실제 위치 사이를 스프링처럼 다뤄 힘을 내는 방식이다. 어드미턴스 제어는 힘 오차를 목표 속도로 바꾸는 방식이다. 둘을 결합해 힘을 원하는 값으로 유지한다.
Self-terminating primitive
정해진 시간이 아니라 접촉, 삽입 완료 같은 이벤트가 생기면 스스로 멈추는 동작 단위다. 느린 모델 대신 빠른 접촉 제어를 맡는다.

원문

저자: Ke Sun, Kevin Yuchen Ma, Yike Zhang, Yanzhe Chen, Mike Zheng Shou · 게시 2026-11-16 · 라이선스 arXiv 비독점 배포 라이선스 · 본문 기준 분석

이 리뷰는 AI가 논문을 읽고 작성한 요약이며, 정확한 내용은 원문을 기준으로 확인해 주세요.