Tactile-VLA: 물체에 대한 지식을 접촉에 연결하기

같은 잡기에도 다른 힘이 필요합니다

단단하고 무거운 물체와 가볍고 깨지기 쉬운 물체는 다른 접촉 전략을 요구합니다. Tactile-VLA는 촉각 관측을 VLA의 시각·언어 표현과 연결해 이러한 물리적 특성에 대한 지식을 조작에 활용하려 합니다.

삽입·분리 작업의 논문 내 비교

원논문 Table 1. 충전기 90%와 비교되는 40%는 π0-base입니다. π0-fast의 값과 혼용하지 않습니다.

일반화를 읽는 관점

익숙하지 않은 물체에서 적절한 접촉 전략을 고르는 것은 흥미로운 방향입니다. 그러나 충전기 작업의 결과를 모든 삽입 작업으로 넓힐 수는 없습니다. USB에서 남은 실패도 함께 읽어야 합니다. 물체 종류에 대한 지식과 실제 접촉 상태의 관측은 서로 다른 역할을 합니다.

우리의 질문

촉각의 어떤 성분이 도움이 되는지 따져 보고 싶습니다. 접촉 유무, 분포, 미끄러짐, 힘 방향이 각각 어떤 행동 선택에 기여하는지 나누어야 합니다. 시각 정보가 충분할 때와 가려졌을 때, 새로운 재질과 새로운 형상을 각각 나누어 평가하는 이유입니다.

함께 살펴보기