Le système Robotics AI «Helix» par figure AI pour Humanoid Robot-A Vision Language Action (VLA) Modèle

Version courte: vision, langue, mouvement: Helix comme étape importante en robotique

Helix est un système d'IA innovant pour les robots humanoïdes développé par la figure AI. Il s'agit d'un modèle de vision-action (VLA) qui combine la perception visuelle, la compréhension du langage et le contrôle moteur précis dans un seul système. Helix marque des progrès significatifs dans le développement de systèmes de robots flexibles pour des environnements non structurés tels que les ménages. Avec sa capacité à effectuer des tâches complexes sans formation préalable, il pourrait révolutionner l'interaction entre l'homme et la machine.

Convient à:

• Robot contrôlé en langue: Helix de la figure AI change tout! Industrie, ménage, futur - compréhension, apprentissage, exécuter en temps réel

Compétences en hélice

• Contrôle en temps réel de tout le haut du corps des robots humanoïdes, y compris 35 axes de mouvement
• Traitement de l'entrée vocale et des informations visuelles sur l'exécution des tâches complexes
• Détection et manipulation d'objets inconnus sans formation spécifique
• Coopération entre plusieurs robots dans l'exécution des tâches
• Exécution de tâches ménagères telles que la compensation d'un réfrigérateur

Détails techniques

Se compose de deux composantes principales:

1. Un modèle de langage multimodal avec 7 milliards de paramètres (7-9 Hz)
2. Un mouvement AI avec 80 millions de paramètres (200 Hz)

• Formé avec seulement 500 heures de formation surveillée
• Fonctionne sur des GPU intégrés efficaces en énergie

Le plus grand concurrent

1. Google Deepmind: développé des modèles VLA comme RT-2
2. Meta: travailler sur des robots humanoïdes avancés
3. Apple: également dans la course au développement des humanoïdes AI avancés
4. OpenAAI: ancien partenaire de la figure AI, maintenant concurrent dans le domaine du développement de l'IA

Google DeepMind

Avec RT-2 (Robotics Transformateur 2), Google DeepMind a présenté un modèle révolutionnaire de l'action de la vision-action (VLA). RT-2 permet aux robots d'exécuter de nouvelles tâches sans formation spécifique en apprenant des concepts à partir de données de texte et d'image d'Internet et de les implémenter en actions robotiques. Dans les tests, RT-2 a montré une performance significativement améliorée dans les nouvelles tâches par rapport au modèle précédent RT-1.

Convient à:

• Google Project Mariner : agent d'IA expérimental en tant qu'extension de navigateur – Navigation Web autonome avec la technologie DeepMind

Méta

Meta investit fortement dans le développement de robots humanoïdes contrôlés par l'IA. La société a fondé une nouvelle équipe au sein de sa division de réalité, qui se concentre sur la recherche et le développement de robots pour les consommateurs. Meta prévoit de développer des systèmes d'IA, des capteurs et des plateformes logicielles qui peuvent également être utilisées par d'autres fabricants.

Pomme

Apple recherche également à la fois les humanoïdes et les conceptions de robots non humanoïdes. Cependant, l'entreprise en est encore dans une phase de développement précoce. L'analyste Ming-Chi Kuo prédit une éventuelle production de masse au plus tôt pour 2028. Apple se concentre particulièrement sur l'interaction entre les humains et les robots.

Convient à:

• Apple en fièvre robot? Les publicités d'emploi révèlent l'offensive du robot d'Apple: le géant de la technologie attaque-t-il maintenant le marché des ménages?

OpenAI

OpenAai, ancien partenaire de Figure AI, construit son propre département de robotique et traite des robots comme une incarnation de l'intelligence artificielle dans le monde réel. La société rivalise désormais directement avec Google Deepmind et d'autres dans le domaine du développement de l'IA pour la robotique.

Machine de rendu 3D AI & XR : une expertise quintuplée de Xpert.Digital dans un ensemble complet de services, R&D XR, PR & SEM - Image : Xpert.Digital

Xpert.Digital possède une connaissance approfondie de diverses industries. Cela nous permet de développer des stratégies sur mesure, adaptées précisément aux exigences et aux défis de votre segment de marché spécifique. En analysant continuellement les tendances du marché et en suivant les évolutions du secteur, nous pouvons agir avec clairvoyance et proposer des solutions innovantes. En combinant expérience et connaissances, nous générons de la valeur ajoutée et donnons à nos clients un avantage concurrentiel décisif.

En savoir plus ici :

• Utilisez l'expertise 5x de Xpert.Digital dans un seul forfait - à partir de seulement 500 €/mois

Modèle VLA innovant: Helix combine la perception, le langage et le mouvement

L'introduction la plus récente de Helix à travers la figure AI marque un progrès significatif dans le paysage de la robotique-do-go. Ce modèle innovant de la longueur de vision (VLA) se distingue par plusieurs propriétés révolutionnaires des systèmes existants et établit de nouvelles normes pour le contrôle des robots humanides. Helix combine la perception visuelle, la compréhension du langage et le contrôle précis des mouvements dans un système intégré spécialement conçu pour les défis de la robotique physique.

Architecture double système unique

La différence la plus significative entre Helix et d'autres systèmes d'IA pour les robots réside dans son architecture innovante à deux composants. Cette structure double système résout un problème fondamental de la robotique AI.

Système 1 et Système 2: Intelligence complémentaire

Contrairement aux approches conventionnelles, Helix utilise deux systèmes complémentaires qui réunissent ensemble un équilibre unique entre l'universalité et la vitesse. Le système 2 (S2) est un modèle de langage multimodal avec 7 milliards de paramètres qui fonctionnent avec une fréquence de 7-9 Hz et agit comme le «cerveau» analytique du robot. Il traite les données visuelles et les commandes vocales, interprète l'environnement et décide quelles actions doivent être effectuées.

Système 1 (S1), une unité de contrôle visuo-moteur rapide et réactive avec 80 millions de paramètres. Ce composant traduit les informations sémantiques fournies par le S2 en actions de robot précises et continues avec une fréquence impressionnante de 200 Hz. Le robot est rapide, mais pas universel ». Helix surmonte cette dichotomie à travers sa double structure.

Cette architecture diffère fondamentalement d'autres modèles VLA connus tels que Google Deepminds RT-2, qui combine également les données visuelles et les commandes vocales, mais n'a pas de division comparable de deux.

Convient à:

• Plateforme Gemini de Google avec Google AI Studio, Google Deep Research avec Gemini Advanced et Google DeepMind

Compétences de contrôle complètes

Contrôler plus de 35 degrés de liberté

Une autre distinction de Helix est sa capacité à coordonner 35 degrés de liberté en même temps. Ce contrôle complet permet un contrôle précis de l'ensemble du haut du corps humanoïde, y compris les poignets, le torse, la tête et les doigts individuels à grande vitesse. Cette capacité de contrôle dépasse la plupart des systèmes existants et permet des tâches de manipulation complexes qui nécessitent un degré élevé de motricité fine.

Génération et apprentissage des objets

Reconnaissance d'objets universels sans formation spécifique

Une qualité exceptionnelle d'Helix est la capacité de reconnaître et de gérer pratiquement tous les petits objets ménagères sans avoir été formé à l'avance sur ses propriétés spécifiques. Cette capacité de généralisation de grande envergure permet au système de gérer des milliers d'objets avec différentes formes, tailles, couleurs et propriétés des matériaux.

Contrairement à de nombreux autres systèmes de robots d'IA qui doivent être nouvellement programmés ou formés pour chaque nouveau type de tâche ou nouveau type d'objet, Helix peut s'adapter à différentes situations et réagir aux commandes vocales naturelles. Cela représente un décalage de paradigme, car le système utilise un seul réseau neuronal pour apprendre tous les comportements - comme ramasser et prendre des objets, en utilisant des tiroirs et des réfrigérateurs ainsi que l'interaction croisée -robot - sans tâches - réglage fin spécifique.

Coordination multi-robots

Compétences de collaboration uniques

Helix est le premier modèle VLA qui est capable de contrôler deux robots en même temps et de leur permettre de travailler ensemble. Cette capacité permet aux robots de résoudre les tâches complexes ensemble, dans lesquelles ils sont suffisants et coordonnent leurs mouvements. La communication presque parrainée entre les robots par des hochements de tête et le contact visuel est particulièrement remarquable.

Cette forme de coordination représente des progrès significatifs par rapport aux systèmes conventionnels, dans lesquels chaque robot est généralement contrôlé individuellement ou doit être formé spécifiquement pour certains rôles. Avec Helix, les deux robots utilisent les mêmes poids de modèle sans avoir besoin d'ajustements individuels.

Efficacité et mise en œuvre de la formation

Besoins de formation minimale, performance maximale

Une autre différence significative réside dans l'efficacité remarquable du processus de formation. Avec seulement 500 heures de données de formation à haute qualité et opérationnelles, Helix a été développé, ce qui est considérablement inférieur à celui des approches comparables qui ont souvent besoin de milliers d'heures de démonstrations spécifiques. Cette efficacité souligne non seulement la sophistication technique du système, mais aussi sa faisabilité économique pour les applications commerciales.

Traitement compatible intégré

Contrairement à de nombreux systèmes Robotics IA qui reposent sur de puissants serveurs externes, Helix fonctionne entièrement sur des GPU intégrés et économes en énergie au sein du robot. Ce traitement embarqué élimine la nécessité d'une connexion constante avec des ressources arithmétiques externes et rend le robot plus autonome et flexible dans divers environnements.

Différenciation stratégique

Intégration verticale au lieu de modèles génériques d'IA

La figure AI a stratégiquement mis en œuvre d'autres sociétés en mettant fin à la coopération avec OpenAI et en poursuivant une stratégie intégrée verticalement dans laquelle le matériel et les logiciels sont développés en interne. Le PDG Brett Adcock a déclaré que les modèles génériques d'IA ne sont pas suffisants pour répondre aux exigences de «l'IA incarnée» - c'est-à-dire l'IA dans les robots physiques. Cette décision souligne l'approche du développement de solutions sur mesure pour les défis spécifiques de la robotique au lieu de s'appuyer sur des modèles d'IA généraux.

Orientation de l'application

Concentrez-vous sur l'utilisation des ménages

Alors que de nombreux acteurs de l'industrie se concentrent actuellement sur les applications de robots industrielles ou sur le lieu de travail, la figure AI avec Helix poursuit une approche stratégiquement surprenante en mettant l'accent sur la robotique des ménages. La capacité du robot, les activités quotidiennes telles que le trier de la nourriture, la saisie du réfrigérateur ou la manipulation d'une grande variété d'articles ménagers s'adresse à un marché qui est souvent considéré comme trop complexe pour l'entrée par d'autres acteurs.

Coordination multi-robot: la clé de la prochaine génération robotique

Avec son architecture à double système, Helix se démarque clairement des autres systèmes d'IA pour les robots via d'autres systèmes d'IA pour les robots. Avec son processus de formation efficace, son traitement intégré et son accent stratégique sur les traitements des ménages, il représente des progrès significatifs dans le développement de robots humanoïdes. Alors que d'autres systèmes tels que Google Deepminds RT-2 recherchent des approches similaires à la combinaison de données visuelles et de commandes vocales, Helix offre des avantages différenciants avec son architecture unique et son approche de développement intégrée, qui en fait un pionnier dans la prochaine génération de robots contrôlés par l'IA.

☑️ Accompagnement des PME en stratégie, conseil, planification et mise en œuvre

☑️ Création ou réalignement de la stratégie digitale et digitalisation

☑️ Expansion et optimisation des processus de vente à l'international

☑️ Plateformes de trading B2B mondiales et numériques

☑️ Développement commercial pionnier

Konrad Wolfenstein

Je serais heureux de vous servir de conseiller personnel.

Vous pouvez me contacter en remplissant le formulaire de contact ci-dessous ou simplement m'appeler au +49 89 89 674 804 (Munich) .

J'attends avec impatience notre projet commun.

Xpert.Digital est une plateforme industrielle axée sur la numérisation, la construction mécanique, la logistique/intralogistique et le photovoltaïque.

Avec notre solution de développement commercial à 360°, nous accompagnons des entreprises de renom depuis les nouvelles affaires jusqu'à l'après-vente.

L'intelligence de marché, le smarketing, l'automatisation du marketing, le développement de contenu, les relations publiques, les campagnes de courrier électronique, les médias sociaux personnalisés et le lead nurturing font partie de nos outils numériques.

Vous pouvez en savoir plus sur : www.xpert.digital - www.xpert.solar - www.xpert.plus