O sistema TWIST: A tecnologia de captura de movimento (MoCap) revoluciona o controle de robôs humanoides – Imagem: Xpert.Digital
Sistema de imitação de corpo inteiro teleoperado: a interação humano-robô em tempo real transformará a robótica
Movimentos humanos para robôs: O potencial do sistema TWIST
Cientistas alcançaram um avanço significativo no desenvolvimento de sistemas de teleoperação para robôs humanoides. Utilizando tecnologia de captura de movimento, robôs humanoides agora podem realizar movimentos semelhantes aos humanos em tempo real. Essa inovação possibilita o controle preciso e intuitivo de robôs, representando um passo importante rumo ao desenvolvimento de robôs com destreza corporal completa. Merece destaque o novo sistema TWIST (Teleoperated Whole-Body Imitation System), que transmite os movimentos corporais completos de uma pessoa para um robô, inaugurando assim uma nova era na interação humano-robô.
Relacionado a isto:
Os fundamentos da teleoperação baseada em captura de movimento
A teleoperação refere-se ao controle remoto de máquinas e é de particular importância no campo da robótica. Sistemas telerobóticos são utilizados quando o espaço de trabalho é muito distante, muito pequeno, muito grande ou muito perigoso para humanos. O desacoplamento espacial entre o humano (operador) e o robô (teleoperador) possibilita aplicações em diversas áreas, como cirurgia minimamente invasiva, desativação de bombas e aplicações espaciais.
A tecnologia de captura de movimento (MoCap) constitui a base dos modernos sistemas de teleoperação. Essa tecnologia permite gravações e simulações detalhadas dos movimentos humanos, possibilitando a digitalização de indivíduos ou grupos inteiros de pessoas. Os movimentos capturados são processados de forma inteligente e podem ser usados para animar corpos e seus movimentos.
Como funciona a tecnologia de captura de movimento
A tecnologia de captura de movimento rastreia e registra com precisão os movimentos corporais de pessoas reais usando uma roupa especial equipada com marcadores e sistemas ópticos. Esse processo coleta dados de movimento de todas as partes do corpo – não apenas braços, mãos, pernas e pés, mas também tronco, quadris e cabeça. Esses dados abrangentes são então transformados em comandos que robôs humanoides podem executar usando inteligência artificial (IA).
O sistema TWIST: um avanço na teleoperação de robôs
O sistema TWIST, desenvolvido na Universidade de Stanford e na Universidade Simon Fraser, representa um avanço significativo na teleoperação de robôs humanoides. Ele combina a tecnologia de captura de movimento com métodos de aprendizado por reforço e aprendizado por imitação.
“Queremos que os humanoides possuam o mesmo nível de destreza corporal total que os humanos”, explica Yanjie Ze, autor principal do estudo TWIST. “Imagine uma cozinha bagunçada. Os humanos conseguem segurar objetos com as duas mãos e usar os pés para mover obstáculos, como uma cesta no chão. Os humanos também conseguem abrir a porta com as laterais do corpo ou com os cotovelos. Queremos que os humanoides sejam capazes de fazer o mesmo, imitando diretamente os humanos.”
Implementação técnica do TWIST
O sistema TWIST é composto por três componentes essenciais:
- Aquisição e redirecionamento de dados: Por meio de redirecionamento offline e online, os movimentos humanos são adaptados para o robô. Isso é alcançado através da transmissão otimizada das posições e orientações das articulações em 3D, com a orientação do corpo e o posicionamento dos pés também sendo ajustados em tempo real.
- Treinamento de controladores em simulação: o TWIST utiliza uma abordagem em duas etapas com uma metodologia "professor-aluno":
- O controlador "Professor" tem acesso privilegiado a movimentos de referência futuros, o que lhe permite planejar movimentos mais suaves.
- O controlador "aluno" é treinado por meio de uma combinação de Aprendizagem por Reforço (AR) e Clonagem de Comportamento (CC) e só pode acessar informações de movimento atuais.
- Controlador de corpo inteiro: O controlador treinado permite que o robô utilize todos os graus de liberdade, mantendo o equilíbrio. Isso resulta em movimentos mais naturais e semelhantes aos humanos.
Em testes com o robô humanoide G1 da Unitree, os pesquisadores descobriram que ele era suficiente para capturar os movimentos de todo o corpo e transferi-los com precisão para as articulações do robô, garantindo que os movimentos dos diferentes membros fossem coordenados.
Relacionado a isto:
Desafios na teleoperação humanoide
O desenvolvimento de sistemas de teleoperação para robôs humanoides apresenta aos pesquisadores diversos desafios complexos:
Superando a lacuna da materialização
Um dos principais desafios é superar a "lacuna de corporeidade" — as diferenças anatômicas entre humanos e robôs. Como os robôs têm proporções, configurações articulares e propriedades físicas diferentes das dos humanos, a transferência direta dos movimentos humanos não é facilmente possível.
Equilíbrio e coordenação de todo o corpo
O rastreamento de corpo inteiro em humanos exige não apenas o controle preciso de articulações individuais, mas também a manutenção dinâmica do equilíbrio durante movimentos complexos. Os sistemas de teleoperação convencionais geralmente se concentram apenas em movimentos isolados, como locomoção ou manipulação, enquanto o TWIST possibilita movimentos coordenados de todo o corpo.
Latência e feedback sensorial
Os sistemas de teleoperação devem superar problemas como latência (atraso temporal) e limitações no feedback sensorial. Esses fatores podem prejudicar a sincronização das ações humanas com as respostas robóticas.
Diversas aplicações da teleoperação por captura de movimento
A teleoperação de robôs humanoides baseada em captura de movimento abre inúmeras possibilidades de aplicação:
Situações perigosas e operações de resgate
Em ambientes perigosos, robôs teleoperados podem ser usados em vez de humanos, por exemplo, na desativação de explosivos (EOD). Entre 2015 e 2020, houve aproximadamente 2.000 operações de EOD por ano somente no Reino Unido, o que destaca a necessidade de alternativas seguras.
Tarefas de manipulação complexas
Robôs humanoides podem realizar tarefas complexas de manipulação por meio de teleoperação, por exemplo, em ambientes não estruturados como cozinhas ou oficinas. Sua capacidade de coordenar o uso de todo o corpo, incluindo braços, mãos, pernas e pés, oferece vantagens cruciais nesse contexto.
Robótica social e expressividade
Para robôs sociais humanoides, a capacidade de realizar movimentos expressivos é essencial. O sistema OCRA (Optimization-based Customizable Retargeting Algorithm), desenvolvido no MPI, permite o mapeamento de movimento em tempo real entre diferentes cadeias cinemáticas, resultando em movimentos intuitivos e semelhantes aos humanos.
Abordagens alternativas e comparação de diferentes sistemas
Além do TWIST, existem várias outras abordagens para teleoperação baseada em captura de movimento:
Sistemas baseados em IMU
Alguns pesquisadores estão utilizando sistemas de captura de movimento baseados em IMU (Unidade de Medição Inercial), que são portáteis e menos dispendiosos do que os sistemas ópticos. Essa tecnologia é usada, por exemplo, para a teleoperação de tarefas de locomoção-manipulação, que combinam locomoção e manipulação.
Abordagens baseadas em redes neurais
Uma abordagem alternativa utiliza redes neurais para aprender um mapeamento entre os dados dos sensores da roupa de captura de movimento e as posições angulares dos atuadores do robô. Este método não requer um modelo analítico ou matemático prévio do robô e, portanto, pode ser aplicado a diversas combinações humano-robô.
Sistemas para partes específicas do corpo
Além dos sistemas de teleoperação de corpo inteiro, existem também sistemas especializados que se concentram em partes específicas do corpo, como a captura de movimento de ambas as mãos. Esses sistemas desempenham um papel importante no controle preciso de robôs bimanual biônicos para tarefas de manipulação delicadas.
Relacionado a isto:
Progressos recentes e perspectivas futuras
O desenvolvimento de sistemas de teleoperação para robôs humanoides está progredindo rapidamente. Além do TWIST, pesquisadores apresentaram recentemente outros sistemas inovadores:
H2O: Humano para Humanoide
O sistema H2O permite a teleoperação em tempo real de um robô totalmente humanoide usando apenas uma câmera RGB. Ele utiliza um sistema de enquadramento baseado em aprendizado por reforço (RL) e um processo de "simulação para dados" para filtrar e selecionar movimentos adequados para robôs humanoides.
teleoperação com suporte de RA
Os pesquisadores também estão investigando como a realidade aumentada (RA) pode auxiliar a teleoperação baseada em captura de movimento. Ao visualizar uma referência virtual do braço humano ao lado do braço robótico, os usuários podem compreender melhor o mapeamento do movimento.
Inteligência Artificial e Captura de Movimento: O Futuro da Interação Humano-Robô
A teleoperação de robôs humanoides baseada em captura de movimento avançou consideravelmente nos últimos anos. Sistemas como o TWIST representam um passo significativo, permitindo que robôs realizem movimentos corporais completos semelhantes aos humanos em tempo real.
A combinação da tecnologia de captura de movimento com métodos avançados de IA, como aprendizado por reforço e clonagem de comportamento, abre novas possibilidades para a interação humano-robô. Robôs humanoides agora podem realizar não apenas movimentos isolados, mas também ações coordenadas de todo o corpo, possibilitando maior destreza e expressividade.
No futuro, essas tecnologias poderão expandir significativamente o uso de robôs humanoides em ambientes perigosos, para tarefas de manipulação complexas e em contextos sociais. A melhoria contínua na precisão, robustez e facilidade de uso dos sistemas de teleoperação ajudará a reduzir ainda mais a lacuna entre as capacidades humanas e a execução robótica.
Relacionado a isto:
Seu parceiro global de marketing e desenvolvimento de negócios
☑️ Nosso idioma comercial é inglês ou alemão
☑️ NOVO: Correspondência em seu idioma nativo!
Konrad Wolfenstein
Eu e minha equipe teremos o prazer de estar à sua disposição como seu consultor pessoal.
Você pode entrar em contato comigo preenchendo o formulário de contato aqui simplesmente ligando para +49 7348 4088 965. Meu endereço de e-mail é wolfenstein@xpert.digital:ou
Estou ansioso pelo nosso projeto conjunto.
