TWIST 시스템: 모션 캡처 기술(MoCap)이 휴머노이드 로봇 제어 방식을 혁신합니다 – 이미지: Xpert.Digital
원격 조종 전신 모방 시스템: 실시간 인간-로봇 상호 작용이 로봇 공학을 혁신할 것입니다
로봇을 위한 인간의 움직임: TWIST 시스템의 잠재력
과학자들이 휴머노이드 로봇 원격 조종 시스템 개발에 있어 획기적인 진전을 이루었습니다. 모션 캡처 기술을 활용하여 휴머노이드 로봇이 이제 실시간으로 사람과 유사한 움직임을 수행할 수 있게 되었습니다. 이러한 혁신은 로봇을 정밀하고 직관적으로 제어할 수 있도록 해주며, 전신을 자유자재로 움직일 수 있는 로봇 개발을 향한 중요한 발걸음입니다. 특히 주목할 만한 것은 사람의 전신 움직임을 로봇에 완벽하게 전달하는 새로운 시스템인 TWIST(Teleoperated Whole-Body Imitation System)로, 인간과 로봇 간의 상호작용에 새로운 시대를 열어갈 것으로 기대됩니다.
이와 관련된 내용:
모션 캡처 기반 원격 조작의 기본 원리
원격 조작은 기계를 원격으로 제어하는 것을 의미하며, 특히 로봇 공학 분야에서 매우 중요합니다. 원격 로봇 시스템은 작업 공간이 너무 멀거나, 너무 좁거나, 너무 크거나, 또는 사람이 접근하기에 너무 위험한 경우에 사용됩니다. 인간(조작자)과 로봇(원격 조작자) 간의 공간적 분리는 최소 침습 수술, 폭발물 처리, 우주 응용 분야 등 다양한 분야에서 활용 가능성을 열어줍니다.
모션 캡처(MoCap) 기술은 현대 원격 조작 시스템의 기반을 형성합니다. 이 기술은 사람의 움직임을 정밀하게 기록하고 시뮬레이션하여 개인 또는 전체 집단의 움직임을 디지털화할 수 있도록 합니다. 캡처된 움직임은 지능적으로 처리되어 신체와 그 움직임을 애니메이션화하는 데 사용될 수 있습니다.
모션 캡처 기술의 작동 방식
모션 캡처 기술은 마커와 광학 시스템이 장착된 특수 슈트를 사용하여 실제 사람의 신체 움직임을 정밀하게 추적하고 기록합니다. 이 과정을 통해 팔, 손, 다리, 발뿐만 아니라 몸통, 엉덩이, 머리 등 신체 모든 부위의 움직임 데이터를 수집합니다. 이렇게 수집된 포괄적인 데이터는 인공지능(AI)을 활용하여 휴머노이드 로봇이 실행할 수 있는 명령으로 변환됩니다.
TWIST 시스템: 로봇 원격 조작의 획기적인 발전
스탠포드 대학교와 사이먼 프레이저 대학교에서 개발된 TWIST 시스템은 휴머노이드 로봇 원격 조작 분야에서 상당한 진전을 나타냅니다. 이 시스템은 모션 캡처 기술과 강화 학습 및 모방 학습 방법을 결합합니다.
"저희는 휴머노이드 로봇이 인간과 같은 수준의 전신 민첩성을 갖추기를 바랍니다."라고 TWIST 연구의 주저자인 옌지에 제는 설명합니다. "어수선한 부엌을 상상해 보세요. 인간은 양손으로 물건을 잡고 발을 이용해 바닥에 있는 바구니 같은 장애물을 옮길 수 있습니다. 또한 몸 옆면이나 팔꿈치를 이용해 문을 열 수도 있죠. 저희는 휴머노이드 로봇이 인간을 직접 모방하여 이와 같은 동작을 할 수 있기를 바랍니다."
TWIST의 기술적 구현
TWIST 시스템은 세 가지 필수 구성 요소로 이루어져 있습니다
- 데이터 획득 및 리타겟팅: 오프라인 및 온라인 리타겟팅을 통해 사람의 움직임을 로봇에 맞게 조정합니다. 이는 3D 관절 위치 및 방향의 최적화된 전송을 통해 이루어지며, 신체 방향과 발 위치 또한 실시간으로 조정됩니다.
- 시뮬레이션을 통한 컨트롤러 훈련: TWIST는 "교사-학생" 방식의 2단계 접근법을 사용합니다
- "티처" 컨트롤러는 향후 참조 움직임에 대한 우선 접근 권한을 가지고 있어 더욱 부드러운 움직임을 계획할 수 있습니다.
- "학생" 컨트롤러는 강화 학습(RL)과 행동 복제(BC)의 조합을 통해 훈련되며 현재 움직임 정보에만 접근할 수 있습니다.
- 전신 제어기: 훈련된 제어기를 통해 로봇은 균형을 유지하면서 모든 자유도를 활용할 수 있습니다. 그 결과 더욱 자연스럽고 사람과 유사한 움직임을 구현할 수 있습니다.
유니트리의 휴머노이드 로봇 G1을 사용한 테스트에서 연구원들은 전신 움직임을 포착하여 로봇의 관절에 정확하게 전달하는 것만으로도 충분하며, 이를 통해 각 팔다리의 움직임이 조화롭게 이루어진다는 것을 발견했습니다.
이와 관련된 내용:
휴머노이드 원격 조작의 과제
휴머노이드 로봇용 원격 조작 시스템 개발은 연구자들에게 여러 가지 복잡한 과제를 제시합니다
구현의 간극 해소
핵심 과제는 인간과 로봇의 해부학적 차이, 즉 "신체적 격차"를 해소하는 것입니다. 로봇은 인간과 신체 비율, 관절 구조, 물리적 특성이 다르기 때문에 인간의 움직임을 그대로 로봇에 적용하는 것은 쉽지 않습니다.
균형 감각 및 전신 협응력
인간형 로봇의 전신 추적은 개별 관절의 정밀한 제어뿐만 아니라 복잡한 움직임 중에도 역동적인 균형을 유지해야 합니다. 기존의 원격 조작 시스템은 이동이나 조작과 같은 개별적인 움직임에만 초점을 맞추는 경우가 많지만, TWIST는 전신의 조화로운 움직임을 가능하게 합니다.
지연 시간 및 감각 피드백
원격 조작 시스템은 지연 시간(레이턴시) 및 센서 피드백의 한계와 같은 문제를 극복해야 합니다. 이러한 요소들은 인간의 행동과 로봇의 반응 간의 동기화를 저해할 수 있습니다.
모션 캡처 원격 조작의 다양한 응용 분야
모션 캡처 기반 휴머노이드 로봇 원격 조작은 수많은 응용 가능성을 열어줍니다
위험한 상황 및 구조 작전
위험한 환경에서는 원격 조종 로봇이 사람을 대신하여 사용될 수 있으며, 예를 들어 폭발물 처리(EOD) 작업에 활용될 수 있습니다. 2015년부터 2020년까지 영국에서만 연간 약 2,000건의 EOD 작업이 수행되었는데, 이는 안전한 대안의 필요성을 보여줍니다.
복잡한 조작 작업
휴머노이드 로봇은 원격 조작을 통해 주방이나 작업장과 같은 비정형 환경에서 복잡한 조작 작업을 수행할 수 있습니다. 팔, 손, 다리, 발을 포함한 신체 전체를 조화롭게 사용할 수 있는 능력은 이러한 환경에서 매우 중요한 이점을 제공합니다.
사회 로봇공학과 표현력
인간형 소셜 로봇에게는 표현력 있는 움직임을 수행하는 능력이 필수적입니다. 막스 플랑크 연구소(MPI)에서 개발한 OCRA 시스템(Optimization-based Customizable Retargeting Algorithm)은 서로 다른 운동학적 체인 간의 실시간 동작 매핑을 가능하게 하여 직관적이고 인간과 유사한 움직임을 구현합니다.
대안적 접근 방식 및 다양한 시스템 비교
TWIST 외에도 모션 캡처 기반 원격 조작에는 다양한 접근 방식이 있습니다
IMU 기반 시스템
일부 연구자들은 광학 시스템보다 휴대성이 좋고 가격이 저렴한 IMU(관성 측정 장치) 기반 모션 캡처 시스템을 사용하고 있습니다. 이 기술은 예를 들어 이동과 조작이 결합된 이동-조작 작업의 원격 조작에 사용됩니다.
신경망 기반 접근 방식
또 다른 접근 방식은 신경망을 사용하여 모션 캡처 슈트에서 얻은 센서 데이터와 로봇 액추에이터의 각도 위치 사이의 매핑을 학습하는 것입니다. 이 방법은 로봇에 대한 사전 분석적 또는 수학적 모델을 필요로 하지 않으므로 다양한 인간-로봇 조합에 적용할 수 있습니다.
신체 특정 부위용 시스템
전신 원격 조종 시스템 외에도 양손 동작 캡처와 같이 특정 신체 부위에 초점을 맞춘 특수 시스템도 있습니다. 이러한 시스템은 섬세한 조작 작업을 위한 생체 모방 양손 로봇의 정밀 제어에 중요한 역할을 합니다.
이와 관련된 내용:
최근 성과 및 향후 전망
휴머노이드 로봇용 원격 조작 시스템 개발이 빠르게 진행되고 있습니다. TWIST 외에도 연구진들은 최근 다음과 같은 혁신적인 시스템들을 선보였습니다
H2O: 인간에서 휴머노이드로
H2O 시스템은 RGB 카메라만을 사용하여 완전한 휴머노이드 로봇을 실시간으로 원격 조종할 수 있도록 합니다. 이 시스템은 강화 학습 기반 프레임과 "시뮬레이션-데이터" 프로세스를 활용하여 휴머노이드 로봇에 적합한 움직임을 필터링하고 선택합니다.
AR 지원 원격 조작
연구원들은 증강 현실(AR)이 모션 캡처 기반 원격 조작을 어떻게 지원할 수 있는지에 대해서도 연구하고 있습니다. 로봇 팔과 함께 사람 팔의 가상 참조 이미지를 시각화함으로써 사용자는 동작 매핑을 더 잘 이해할 수 있습니다.
인공지능과 모션 캡처: 인간-로봇 상호작용의 미래
최근 몇 년 동안 모션 캡처 기반 휴머노이드 로봇 원격 조종 기술이 크게 발전했습니다. TWIST와 같은 시스템은 로봇이 실시간으로 사람과 유사한 전신 움직임을 수행할 수 있도록 함으로써 중요한 진전을 이루었습니다.
모션 캡처 기술과 강화 학습, 행동 복제와 같은 고급 인공지능 기법의 결합은 인간과 로봇 간의 상호작용에 새로운 가능성을 열어줍니다. 이제 휴머노이드 로봇은 개별적인 움직임뿐만 아니라 전신을 활용한 협동 동작까지 수행할 수 있게 되어 더욱 뛰어난 기교와 표현력을 발휘할 수 있습니다.
미래에는 이러한 기술들이 위험한 환경, 복잡한 조작 작업, 그리고 사회적 맥락에서 휴머노이드 로봇의 활용 범위를 크게 확장시킬 수 있을 것입니다. 원격 조작 시스템의 정밀도, 견고성, 그리고 사용자 편의성이 지속적으로 향상됨에 따라 인간의 능력과 로봇의 실행 능력 간의 격차는 더욱 줄어들 것입니다.
이와 관련된 내용:
귀사의 글로벌 마케팅 및 사업 개발 파트너
☑️ 저희 업무 언어는 영어 또는 독일어입니다
☑️ 신규 기능: 모국어로 소통하세요!
Konrad Wolfenstein
저와 저희 팀은 여러분의 개인 자문가로서 기꺼이 도움을 드릴 준비가 되어 있습니다.
여기 있는 문의 양식을 작성 wolfenstein@xpert.digital.하시거나 +49 7348 4088 965 로 전화 주시면 연락 드리겠습니다. 제 이메일 주소는 입니다
저는 우리의 공동 프로젝트를 기대하고 있습니다.
