DuoMind: Enabling Distributed Multi-Robot Coordination with Semantic Communication

이 논문은 로봇마다 추론 모델과 행동 모델을 나눠 담고, 서로 의도가 담긴 메시지를 주고받게 해 중앙 서버 없이 여러 로봇이 협업하게 만들었다.

이 논문은 한마디로 분산형 멀티로봇 협업을 위해 각 로봇 안에 두 개의 두뇌를 넣은 연구다. DuoMind는 각 로봇에 VLM(그림을 이해하는 언어모델) 기반 오케스트레이터로 상위 계획을 세우고, VLA(그림을 행동으로 바꾸는 모델)로 정밀 동작을 수행하게 한다. 로봇들끼리는 자기 의도와 하위 목표가 담긴 의미 메시지를 주고받아 부분적으로만 보이는 상황에서도 협업한다. 긴 호리즌 과제 벤치마크 RoboPoly와 RoboTwin에서 기준들을 앞섰고, 계층 구조와 의사 소통 각각의 기여를 제거 실험으로 확인했다.

핵심 요약

• VLM 오케스트레이터(상위 추론)와 VLA 행동 모델(하위 제어)을 로봇별로 분산 배치한 계층 구조를 제안했다.
• 로봇 간 통신은 원시 데이터가 아닌 의도·하위목표가 담긴 의미 메시지로 주고받게 했다.
• 긴 호리즌 멀티로봇 조작 벤치마크 RoboPoly를 새로 구축해 평가 공백을 메웠다.
• RoboPoly와 RoboTwin에서 기존 기준들을 꾸준히 앞섰고, 제거 실험으로 계층 설계와 의미 통신의 효과를 각각 확인했다.

논문 링크

외부 연구를 정리한 자료입니다. HDATF가 발표한 논문이나 제품 성능을 측정한 결과는 아닙니다.