
시뮬레이션-실제 조작을 위한 인수분해 촉각 표현 및 제어
Factorized Tactile Representation and Control for Sim-to-Real Manipulation
Siqi Shang, Bianca Aumann, Tye Brady, Joshua Migdal, Taskin Padir
촉각 시뮬레이션-실제 전이(sim-to-real) 학습은 시뮬레이션 접촉과 센서 고유 응답 사이의 간극을 메우면서 제어에 필요한 정보를 보존해야 한다. 이 연구는 법선력(normal force)과 접촉 패치를 유효 접촉 응답으로 매핑하는 인수분해 촉각 표현 및 제어 프레임워크를 제안하며, 응답을 접촉 기하, 힘 분포, 시간적 접촉 변화로 분리해 각각 독립적으로 인코딩하고 랜덤화한다. 촉각 게이트 정책(Tactile Gated Policy)은 이 표현들을 제어 과정에서 독립적으로 유지하고, 재훈련 없이 다양한 마스크 구성에서 동작한다. 시뮬레이션과 실제 환경 평가에서 1 mm 미만의 접촉 위치 추정 정확도와 미학습 기하에서 1.69 N의 힘 추적 오차를 달성했다. 실제 환경의 적대적 핀 삽입(adversarial peg insertion) 과제에서 비분해 응답 대비 35% 성능 향상을 기록했으며, 표현 유형에 따라 상호작용별 효과 차이가 나타났다.












