Robotică umanoidă: NVIDIA accelerează dezvoltarea roboților umanoizi cu realitate extinsă, inteligență artificială și Omniverse (Metaverse)

🕶️🌐 Progresele tehnologice în domeniul realității extinse (XR) și al inteligenței artificiale (IA) sunt impresionante și de anvergură. Un exemplu excelent al acestei dezvoltări este activitatea NVIDIA, o companie cunoscută în principal pentru plăcile sale grafice, dar care s-a impus acum și ca pionieră în domeniul roboticii. NVIDIA valorifică XR, IA și Omniverse (Metaverse) pentru a accelera dezvoltarea roboților umanoizi și a stabili noi standarde.

🍏✨ Influența Apple Vision Pro asupra dezvoltărilor XR

Deși lansarea Vision Pro de la Apple a stârnit îngrijorări că ar putea să nu fie un succes comercial, aceasta a accelerat, fără îndoială, dezvoltarea aplicațiilor XR (Realitate Extinsă). XR, Realitatea Augmentată (AR) și Realitatea Mixtă (MR) au fost subiecte fierbinți de ani de zile, dar descoperirea anticipată încă nu s-a materializat. Totuși, acest lucru nu înseamnă că XR ca și concept a eșuat. Dimpotrivă, există numeroase cazuri de utilizare promițătoare și concepte de dezvoltare care ne îndreaptă spre viitorul tehnologiei XR.

🤖🕶️ NVIDIA și controlul roboților folosind XR

Nvidia controlează roboții cu Apple Vision Pro – Imagine: NVIDIA

Un exemplu recent fascinant este un videoclip lansat de NVIDIA care demonstrează controlul unui robot folosind Apple Vision Pro. În acest scenariu, o persoană se află într-o bucătărie și controlează un robot adoptând perspectiva robotului prin intermediul ochelarilor Vision Pro. Mișcările mâinii captate de ochelari sunt transmise robotului, permițând persoanei să îl controleze de la distanță. Acest lucru permite aplicații precum prepararea pâinii prăjite cu miere, controlate de către persoană.

Această tehnologie are implicații de amploare, în special în zonele în care poate fi periculoasă pentru oameni, cum ar fi clădirile cu risc de prăbușire sau alte medii periculoase. Este ușor de imaginat cum ar putea fi utilizată această tehnologie în misiuni de salvare sau de dezamorsare a bombelor.

🌟 Mai multe despre asta mai jos, în ultima secțiune

Dezvoltatorii obțin acces la noile microservicii NVIDIA NIM pentru simulări de roboți în Isaac Lab și Isaac Sim, la „OSMO Robot Cloud Compute Orchestration Service”, la „Teleoperated Data Capture Workflow” și la multe altele.

📊🛠️ Progrese în achiziția de date și simularea roboților umanoizi

Una dintre cele mai mari provocări în dezvoltarea roboților umanoizi este cantitatea enormă de date necesară pentru antrenarea modelelor de bază. Pentru a simplifica și accelera acest proces, NVIDIA a dezvoltat fluxuri de lucru care permit generarea unor cantități mari de date dintr-un număr mic de demonstrații teleoperate. Aceste date sunt apoi utilizate în medii de simulare precum NVIDIA Isaac Sim pentru a crea seturi de date sintetice și a antrena în continuare modelele.

Această abordare inovatoare este evidentă și în utilizarea microserviciului MimicGen NIM, care generează date sintetice despre mișcare și percepție. Acest lucru nu numai că economisește timp, ci și costuri semnificative, deoarece sunt necesare mai puține date demonstrative din lumea reală.

🧠⚙️ Rolul inteligenței artificiale în robotică

„Următorul val al inteligenței artificiale este robotica, iar una dintre cele mai interesante dezvoltări sunt roboții umanoizi”, a declarat Jensen Huang, fondator și CEO al NVIDIA. Această viziune determină NVIDIA să își dezvolte continuu platformele și tehnologiile și să facă umanoizii accesibili la nivel mondial. Prin furnizarea de modele de inteligență artificială, instrumente de simulare și resurse de calcul, NVIDIA contribuie la accelerarea dezvoltării roboților umanoizi.

🧩🤝 Oportunități de colaborare și dezvoltare

NVIDIA a lansat un Program pentru Dezvoltatori de Roboți Humanoizi pentru a oferi dezvoltatorilor acces timpuriu la noi instrumente și platforme. Companii precum Boston Dynamics și Fourier se numără printre primele care beneficiază de acest program. Scopul este de a valorifica cele mai recente tehnologii împreună cu partenerii și de a avansa industria roboticii în ansamblu. Aceste colaborări scurtează ciclurile de dezvoltare și aduc roboții pe piață mai rapid.

🚀🌟 Viitorul roboticii umanoide

Progresele în robotică și inteligența artificială sunt impresionante și deschid noi posibilități pentru utilizarea roboților umanoizi. NVIDIA joacă un rol central în această dezvoltare prin crearea de instrumente și platforme puternice care permit o instruire și o implementare mai eficientă a roboților umanoizi. Combinația dintre realitate augmentată (AR), inteligență artificială (IA) și instrumente sofisticate de simulare revoluționează dezvoltarea și controlul acestor roboți.

Privind în perspectivă, va fi interesant să vedem cum progresează aceste tehnologii și în ce noi domenii vor fi implementați roboții umanoizi. Aplicațiile potențiale variază de la automatizare industrială și asistență medicală la misiuni de salvare și nu numai. NVIDIA deschide calea, demonstrând prin inovațiile sale că integrarea AR și AI în robotică nu este doar posibilă, ci și excepțional de promițătoare. Dezvoltările în acest domeniu ar putea schimba în curând fundamental viața noastră de zi cu zi.

📣 Subiecte similare

• 🤖 NVIDIA și revoluția roboticii umanoide: XR și AI în armonie
• 🔧 Instrumentele NVIDIA pentru optimizarea roboților umanoizi: Progrese și inovații
• 🌐 Rolul Apple Vision Pro în interacțiunea om-robot
• 🚀 NVIDIA accelerează robotica umanoidă cu ajutorul inteligenței artificiale și tehnicilor de simulare
• 🚁 Roboți umanoizi în medii periculoase: Potențiale și aplicații
• 👾 Colaborare în cadrul Programului de Dezvoltare a Roboților Humanoizi: NVIDIA și partenerii săi
• 🏭 Aplicații industriale ale roboților umanoizi: O nouă eră a automatizării
• 🍏 Impactul Apple Vision Pro asupra realității augmentate (AR) și roboticii
• 🔭 Viitorul roboticii umanoide: aplicații și dezvoltări
• 🌐 NVIDIA ne aduce în Omnivers: Roboți umanoizi în Metavers

#️⃣ Hashtag-uri: #NVIDIA #roboticăumanoidă #inteligențăartificială #realitateaugmentată #dezvoltarerobotică

Găsirea agenției, biroului de planificare sau firmei de consultanță Metaverse potrivite - Imagine: Xpert.Digital

🗒️ Găsirea agenției, biroului de planificare sau firmei de consultanță Metaverse potrivite – Căutare și căutare: Zece sfaturi importante pentru consultanță și planificare

Mai multe informații aici:

• Experți în Metaverse și XR: Găsiți partenerii potriviți

Beneficiați de expertiza extinsă, în cinci domenii, a Xpert.Digital într-un pachet complet de servicii | Cercetare și dezvoltare, XR, PR și optimizare a vizibilității digitale - Imagine: Xpert.Digital

Xpert.Digital deține cunoștințe aprofundate în diverse industrii. Acest lucru ne permite să dezvoltăm strategii personalizate, aliniate cu precizie cerințelor și provocărilor segmentului dumneavoastră specific de piață. Prin analiza continuă a tendințelor pieței și monitorizarea evoluțiilor din industrie, putem acționa proactiv și oferi soluții inovatoare. Combinația dintre experiență și expertiză generează valoare adăugată și oferă clienților noștri un avantaj competitiv decisiv.

Mai multe informații aici:

• Beneficiați de cele 5 domenii de expertiză ale Xpert.Digital într-un singur pachet – începând de la doar 500 €/lună

🚀🧠 Roboți umanoizi: NVIDIA prezintă noi tehnologii și platforme pentru următorul val al inteligenței artificiale

Pentru a accelera dezvoltarea roboților umanoizi la nivel mondial, NVIDIA oferă producătorilor de roboți, dezvoltatorilor de modele de inteligență artificială și producătorilor de software o gamă de servicii, modele și platforme de calcul pentru a proiecta, antrena și construi următoarea generație de roboți umanoizi.

Ofertele includ noi microservicii și framework-uri NVIDIA NIM™ pentru simularea și învățarea roboților, serviciul NVIDIA Orchestration pentru rularea sarcinilor de lucru în mai multe etape pentru roboți și un flux de lucru pentru teleoperații asistate de inteligență artificială și simulare, care permite dezvoltatorilor să antreneze roboți cu cantități mici de date demonstrative umane.

„Următorul val al inteligenței artificiale este robotica, iar una dintre cele mai interesante dezvoltări sunt roboții umanoizi”, a declarat Jensen Huang, fondator și CEO al NVIDIA. „Avansăm întregul pachet de robotică NVIDIA și deschidem accesul dezvoltatorilor și companiilor umanoide din întreaga lume pentru a utiliza platformele, bibliotecile de accelerare și modelele de inteligență artificială cele mai potrivite nevoilor lor.”

🚀 Dezvoltare accelerată cu NVIDIA NIM și OSMO

Microserviciile NIM oferă containere predefinite bazate pe software-ul de inferență NVIDIA, permițând dezvoltatorilor să reducă timpii de implementare de la săptămâni la câteva minute. Două noi microservicii AI permit roboticienilor să îmbunătățească fluxurile de lucru de simulare pentru AI fizică generativă în NVIDIA Isaac Sim™, o aplicație de referință pentru simulări de roboți construită pe platforma NVIDIA Omniverse™.

Microserviciul MimicGen NIM generează date sintetice de mișcare pe baza datelor teleoperate înregistrate de la dispozitive de calcul spațial, cum ar fi Apple Vision Pro. Microserviciul Robocasa NIM generează sarcini robotice și medii pregătite pentru simulare în OpenUSD, un framework universal pentru dezvoltare și colaborare în lumi 3D.

NVIDIA OSMO, disponibil acum, este un serviciu gestionat nativ în cloud care permite utilizatorilor să orchestreze și să scaleze fluxuri de lucru complexe de dezvoltare a roboților pe resurse de calcul distribuite, fie local, fie în cloud.

OSMO simplifică semnificativ fluxurile de lucru pentru antrenamentul și simularea roboților, reducând ciclurile de implementare și dezvoltare de la luni la mai puțin de o săptămână. Utilizatorii pot vizualiza și gestiona o gamă largă de sarcini, cum ar fi generarea de date sintetice, modele de antrenament, efectuarea învățării prin consolidare și implementarea testării software-in-the-loop la scară largă pentru umanoizi, roboți mobili autonomi și manipulatori industriali.

🤖 Progrese în fluxurile de lucru de achiziție de date pentru dezvoltatorii de roboți umanoizi

Antrenarea modelelor de bază pentru roboți umanoizi necesită o cantitate enormă de date. O modalitate de a colecta date demonstrative umane este prin teleoperare, dar aceasta devine din ce în ce mai costisitoare și consumatoare de timp.

Un flux de lucru de referință pentru teleoperațiuni, susținut de NVIDIA AI și Omniverse, demonstrat la conferința de grafică pe calculator SIGGRAPH, permite cercetătorilor și dezvoltatorilor de inteligență artificială să genereze cantități masive de date sintetice despre mișcare și percepție dintr-un număr minim de demonstrații de filmare la distanță.

Mai întâi, dezvoltatorii folosesc Apple Vision Pro pentru a înregistra un număr mic de demonstrații teleoperate. Apoi, simulează înregistrările în NVIDIA Isaac Sim și utilizează microserviciul MimicGen NIM pentru a genera seturi de date sintetice din înregistrări.

Dezvoltatorii antrenează modelul de bază umanoid Project GR00T cu date reale și sintetice, economisind timp și bani. Apoi, aceștia utilizează microserviciul Robocasa NIM din Isaac Lab, un framework de învățare a roboticii, pentru a genera experiențe pentru reantrenarea modelului robotului. Pe parcursul fluxului de lucru, NVIDIA OSMO alocă fără probleme sarcini de calcul diverselor resurse, economisind dezvoltatorilor săptămâni de muncă administrativă.

Fourier, o companie specializată în platforme robotice universale, vede beneficiile utilizării tehnologiei de simulare pentru generarea sintetică a datelor de antrenament.

„Dezvoltarea de roboți umanoizi este extrem de complexă – necesită o cantitate incredibilă de date din lumea reală, colectate cu meticulozitate în lumea reală”, a declarat Alex Gu, CEO al Fourier. „Noile instrumente de simulare și dezvoltare generativă de inteligență artificială de la NVIDIA vor ajuta la accelerarea și simplificarea fluxurilor noastre de lucru pentru dezvoltarea de modele.”

🌐 Extinderea accesului la tehnologiile NVIDIA pentru dezvoltatorii umanoizi

NVIDIA oferă trei platforme de calcul pentru a facilita dezvoltarea roboticii umanoide: supercomputere NVIDIA AI pentru antrenarea modelelor; NVIDIA Isaac Sim, bazat pe Omniverse, unde roboții își pot învăța și perfecționa abilitățile în lumi simulate; și computere robotice umanoide NVIDIA Jetson™ Thor pentru rularea modelelor. Dezvoltatorii pot accesa și utiliza toate - sau doar părți - ale platformelor pentru a se potrivi nevoilor lor specifice.

Prin intermediul unui nou program NVIDIA pentru dezvoltatori de roboți umanoizi, dezvoltatorii pot obține acces anticipat la noile oferte, precum și la cele mai recente versiuni ale modelelor de bază umanoide de uz general NVIDIA Isaac Sim, NVIDIA Isaac Lab, Jetson Thor și Project GR00T.

1x, Boston Dynamics, ByteDance Research, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, Neura Robotics, RobotEra și Skild AI se numără printre primele companii care se alătură programului Early Access.

„Boston Dynamics și NVIDIA au o lungă istorie de colaborare strânsă pentru a depăși limitele posibilului în robotică”, a declarat Aaron Saunders, director tehnic al Boston Dynamics. „Suntem încântați să vedem roadele acestei munci care propulsează industria înainte, iar programul de acces timpuriu este o modalitate fantastică de a accesa tehnologie de talie mondială.”

📅 Disponibilitate

Dezvoltatorii se pot alătura acum programului NVIDIA Humanoid Robot Developer pentru a accesa NVIDIA OSMO și Isaac Lab și vor obține în curând acces la NVIDIA NIM Microservices.

Aflați mai multe despre cele mai recente evoluții în domeniul inteligenței artificiale generative și al calculului accelerat urmărind discuțiile lui Huang la SIGGRAPH, cea mai importantă conferință de grafică pe calculator, care se desfășoară până pe 1 august la Denver.

Dezvoltatorii pot rămâne la curent cu progresele înregistrate în domeniul inteligenței artificiale generative și al calculului accelerat participând la sesiunile și prezentările recente de la SIGGRAPH. Această conferință le oferă oportunitatea de a învăța direct de la liderii din industrie, inclusiv NVIDIA, și de a rămâne la curent cu cele mai recente inovații și tehnologii.

🤝 Participarea la Programul NVIDIA pentru Dezvoltatori de Roboți Humanoizi

Pentru dezvoltatorii interesați de dezvoltarea și optimizarea continuă a roboților umanoizi, Programul NVIDIA pentru Dezvoltatori de Roboți Umanoizi oferă avantaje unice. Accesul timpuriu la cele mai recente instrumente și platforme le permite să reducă semnificativ timpul de dezvoltare și să își lanseze proiectele pe piață mai rapid. Programul este conceput pentru a încuraja o colaborare strânsă între NVIDIA și dezvoltatori, pentru a se asigura că soluțiile dezvoltate îndeplinesc cele mai înalte standarde și valorifică cele mai recente progrese tehnologice.

🔧 Acces NVIDIA la aceste tehnologii de ultimă generație

NVIDIA continuă să extindă și să accelereze dezvoltarea roboților umanoizi prin introducerea de instrumente și platforme avansate. Cu noile microservicii NIM, serviciul de orchestrare OSMO și fluxurile de lucru inovatoare de achiziție de date, dezvoltatorii au resursele necesare pentru a depăși limitele roboticii. Prin furnizarea de acces la aceste tehnologii de ultimă generație, NVIDIA permite dezvoltatorilor din întreaga lume să creeze roboți umanoizi mai robusti și mai inteligenți, care pot fi utilizați într-o gamă largă de aplicații. Angajamentul NVIDIA față de această industrie este demonstrat în mod clar de investițiile sale continue și de parteneriatele cu jucători de top din industrie.

Dezvoltatorii care doresc să fie în avangarda acestei revoluții tehnologice sunt invitați să se alăture Programului NVIDIA pentru Dezvoltatori de Roboți Umanoizi pentru a utiliza cele mai noi instrumente și a deveni parte a unei comunități de pionieri în domeniul roboticii umanoide. Beneficiind de resursele și sprijinul NVIDIA, aceștia își pot spori capacitățile de inovare și pot impulsiona evoluția roboticii.

📣 Subiecte similare

• 🤖 Acces la microserviciile NVIDIA NIM pentru simulări de roboți
• 🚀 Dezvoltare accelerată de roboți umanoizi cu NVIDIA OSMO
• 💡 Flux de lucru de teleoperații susținut de inteligența artificială pentru dezvoltarea de roboți
• 🔧 NVIDIA OSMO: Serviciu gestionat nativ în cloud pentru fluxuri de lucru cu roboți
• 🧑‍💻 NVIDIA Isaac Sim și Isaac Lab pentru simulări avansate
• 🌐 Progrese în generarea de date sintetice de antrenament pentru roboții umanoizi
• 👨‍🔬 Programul NVIDIA pentru dezvoltatori de roboți umanoizi: Acces timpuriu
• 👥 Parteneriat cu giganți din industrie precum Boston Dynamics și Fourier
• 🍎 Apple Vision Pro și MimicGen pentru date sintetice de mișcare
• 📅 Participare la SIGGRAPH: NVIDIA își prezintă cele mai recente inovații

#️⃣ Hashtag-uri: #Robotică #IA #RoboțiUmanoizi #NVIDIANIM #SIGGRAPH2024

Xpert.Digital - Dezvoltare de afaceri pionieră

Ochelari inteligenți și AI - expert în industria XR/AR/VR/MR

Metaversul consumatorului sau Metaversul în general

Dacă aveți întrebări, aveți nevoie de informații suplimentare sau sfaturi, vă rog să mă contactați oricând.

Konrad Wolfenstein

Aș fi bucuros să vă servesc drept consilier personal.

Mă puteți contacta completând formularul de contact de mai jos sau pur și simplu sunându-mă la +49 89 89 674 804 (München) .

Aștept cu nerăbdare proiectul nostru comun.

Xpert.Digital este un hub pentru industrie, axat pe digitalizare, inginerie mecanică, logistică/intralogistică și fotovoltaică.

Cu soluția noastră de Dezvoltare Afaceri 360°, sprijinim companii renumite, de la achiziții noi până la post-vânzare.

Inteligența de piață, smarketing-ul, automatizarea marketingului, dezvoltarea de conținut, PR-ul, campaniile de e-mail, social media personalizate și cultivarea lead-urilor fac parte din instrumentele noastre digitale.

Puteți găsi mai multe informații la: www.xpert.digital - www.xpert.solar - www.xpert.plus