
SkeleWAM: 효율적인 로봇 조작을 위한 골격 세계-행동 모델링
SkeleWAM: Skeleton World-Action Modeling for Efficient Robotic Manipulation
Juyi Sheng, Hua Wang, Mengyuan Liu
세계-행동 모델(WAM, World Action Model)은 로봇 행동 생성과 미래 상태 예측을 결합하는 방식이지만, 기존 모델들은 영상 또는 학습된 시각 잠재 표현을 사용해 기하 정보를 암묵적으로만 표현한다. SkeleWAM은 로봇 관절·물체 중심·상호작용 점으로 이루어진 희소 3D 골격으로 조작 장면을 표현한다. 골격은 RGB-D 관측과 고유감각(proprioception)으로부터 온라인으로 구성되며, 행동 생성과 미래 골격 예측에 공통 상태 표현으로 사용된다. 미래 골격 예측은 시각 재구성 없이 행동 학습에 추가적인 기하 지도 신호를 제공하며, 추론 시에는 메도이드 행동 합의(MAC, Medoid Action Consensus) 전략이 확률적 행동 샘플의 보조 합의 기제로 작동한다. LIBERO-Plus 벤치마크에서 57.1M 파라미터로 전체 성공률 85.9%를 기록해 Cosmos-Policy 대비 3.7 퍼센트포인트 높은 성능을 보였다.











