SpatialHarness: Test-Time Spatial Scaffolding for Fine Robotic Manipulation

이 논문은 정밀 로봇 조작의 실패 원인을 정책 능력이 아닌 공간 관찰성 부족으로 짚고, 시뮬레이션 장면에서 가상 시점을 추가 렌더링해 얼린 정책에 공간 정보를 보충하는 SpatialHarness를 제안했다.

이 논문은 한마디로 실제 실행과 동기화된 온라인 시뮬레이션 장면을 유지하며 과제에 중요한 공간 관계를 드러내는 가상 시점을 렌더링해, 정책 미세조정 없이 얼린 멀티모달 정책의 정밀 조작을 끌어올리는 테스트타임 하네스 SpatialHarness를 제안한다. 저자들은 정밀 조작 실패의 상당 부분이 정책 능력 부족이 아니라 물리 카메라 구성이 공간 관계를 제대로 드러내지 못하는 데서 온다고 분석했다. 같은 얼린 GPT-6 Astra 정책으로 플러그 삽입은 26.7%에서 66.7%로, 하노이탑은 0%에서 100%로 성공률이 올랐고 평균은 18.33%에서 83.33%로 개선됐다.

핵심 요약

• SpatialHarness는 실제 실행과 동기화되는 온라인 시뮬레이션 장면을 유지하고 과제에 중요한 공간 관계를 식별해 보완 가상 시점을 렌더링한다.
• 정책 미세조정이나 물리 센싱 구성 변경 없이 얼린 멀티모달 정책에 공간 정보를 공급한다.
• 같은 얼린 GPT-6 Astra 정책에서 플러그 삽입 성공률을 26.7%에서 66.7%로, 하노이탑을 0%에서 100%로 올렸다.
• 평균 성공률은 18.33%에서 83.33%로 65.00포인트 개선되었다.

논문 링크

외부 연구를 정리한 자료입니다. HDATF가 발표한 논문이나 제품 성능을 측정한 결과는 아닙니다.