Humanoid Robotics: NVIDIA accelererer udviklingen af ​​humanoide robotter med udvidet virkelighed, AI og Omniverse (Metaverse)

🕶️🌐 Teknologiske fremskridt inden for extended reality (XR) og kunstig intelligens (AI) er imponerende og vidtrækkende. Et godt eksempel på denne udvikling er NVIDIAs arbejde, en virksomhed primært kendt for sine grafikkort, men som nu også har etableret sig som en pioner inden for robotteknologi. NVIDIA udnytter XR, AI og Omniverse (Metaverse) til at accelerere udviklingen af ​​humanoide robotter og sætte nye standarder.

🍏✨ Apple Vision Pros indflydelse på XR-udviklingen

Selvom udgivelsen af ​​Apples Vision Pro gav anledning til bekymring om, at den måske ikke ville blive en kommerciel succes, accelererede den utvivlsomt udviklingen af ​​XR-applikationer (Extended Reality). XR, Augmented Reality (AR) og Mixed Reality (MR) har været varme emner i årevis, men det forventede gennembrud er endnu ikke indtruffet. Det betyder dog ikke, at XR som koncept har fejlet. Tværtimod er der adskillige lovende anvendelsesscenarier og udviklingskoncepter, der peger os mod fremtiden for XR-teknologi.

🤖🕶️ NVIDIA og styring af robotter ved hjælp af XR

Nvidia styrer robotter med Apple Vision Pro – Billede: NVIDIA

Et fascinerende eksempel fra nyere tid er en video udgivet af NVIDIA, der demonstrerer styringen af ​​en robot ved hjælp af Apple Vision Pro. I dette scenarie er en person i et køkken og styrer en robot ved at antage robottens perspektiv gennem Vision Pro-brillerne. Håndbevægelserne, der opfanges af brillerne, overføres til robotten, så personen kan styre den eksternt. Dette muliggør applikationer som f.eks. at tilberede toast med honning, der styres af personen selv.

Denne teknologi har vidtrækkende konsekvenser, især i områder, hvor den kan være farlig for mennesker, såsom i bygninger med risiko for sammenstyrtning eller andre farlige miljøer. Det er let at forestille sig, hvordan denne teknologi kunne bruges i redningsmissioner eller bomberydning.

🌟 Mere om dette i sidste afsnit nedenfor

Udviklere får adgang til nye NVIDIA NIM-mikrotjenester til robotsimuleringer i Isaac Lab og Isaac Sim, "OSMO Robot Cloud Compute Orchestration Service", "Teleoperated Data Capture Workflow" og mere.

📊🛠️ Fremskridt inden for dataindsamling og simulering for humanoide robotter

En af de største udfordringer ved at udvikle humanoide robotter er den enorme mængde data, der kræves for at træne basismodellerne. For at forenkle og accelerere denne proces har NVIDIA udviklet arbejdsgange, der muliggør generering af store mængder data fra et lille antal fjernbetjente demonstrationer. Disse data bruges derefter i simuleringsmiljøer som NVIDIA Isaac Sim til at oprette syntetiske datasæt og yderligere træne modellerne.

Denne innovative tilgang er også tydelig i brugen af ​​MimicGen NIM-mikrotjenesten, som genererer syntetiske bevægelses- og perceptionsdata. Dette sparer ikke kun tid, men også betydelige omkostninger, da der kræves færre demonstrationsdata fra den virkelige verden.

🧠⚙️ AI's rolle i robotteknologi

"Den næste bølge af AI er robotteknologi, og en af ​​de mest spændende udviklinger er humanoide robotter," sagde Jensen Huang, grundlægger og administrerende direktør for NVIDIA. Denne vision driver NVIDIA til løbende at udvikle sine platforme og teknologier og gøre humanoide robotter tilgængelige over hele verden. Ved at levere AI-modeller, simuleringsværktøjer og computerressourcer hjælper NVIDIA med at accelerere udviklingen af ​​humanoide robotter.

🧩🤝 Samarbejds- og udviklingsmuligheder

NVIDIA har lanceret et Humanoid Robot Developer Program for at give udviklere tidlig adgang til nye værktøjer og platforme. Virksomheder som Boston Dynamics og Fourier er blandt de første til at drage fordel af dette program. Målet er at udnytte de nyeste teknologier sammen med partnere og fremme robotindustrien som helhed. Disse samarbejder forkorter udviklingscyklusser og bringer robotter hurtigere på markedet.

🚀🌟 Fremtiden for humanoid robotteknologi

Fremskridt inden for robotteknologi og kunstig intelligens er imponerende og åbner op for nye muligheder for brugen af ​​humanoide robotter. NVIDIA spiller en central rolle i denne udvikling ved at skabe kraftfulde værktøjer og platforme, der muliggør mere effektiv træning og indsættelse af humanoide robotter. Kombinationen af ​​AR, AI og sofistikerede simuleringsværktøjer revolutionerer udviklingen og styringen af ​​disse robotter.

Det bliver spændende at se, hvordan disse teknologier udvikler sig, og inden for hvilke nye områder humanoide robotter vil blive indsat. Potentielle anvendelser spænder fra industriel automatisering og medicinsk assistance til redningsmissioner og mere til. NVIDIA baner vejen og demonstrerer gennem sine innovationer, at integrationen af ​​AR og AI i robotteknologi ikke kun er mulig, men også usædvanligt lovende. Udviklingen på dette område kan snart fundamentalt ændre vores dagligdag.

📣 Lignende emner

• 🤖 NVIDIA og den humanoide robotrevolution: XR og AI i harmoni
• 🔧 NVIDIAs værktøjer til optimering af humanoide robotter: Fremskridt og innovationer
• 🌐 Apple Vision Pros rolle i interaktionen mellem menneske og robot
• 🚀 NVIDIA accelererer humanoid robotteknologi med AI og simuleringsteknikker
• 🚁 Humanoide robotter i farlige miljøer: Potentialer og anvendelser
• 👾 Samarbejde i Humanoid Robot Developer Program: NVIDIA og dets partnere
• 🏭 Industrielle anvendelser af humanoide robotter: En ny æra inden for automatisering
• 🍏 Apple Vision Pros indflydelse på AR og robotteknologi
• 🔭 Fremtiden for humanoid robotteknologi: anvendelser og udviklinger
• 🌐 NVIDIA bringer os til Omniverset: Humanoide robotter i Metaverset

#️⃣ Hashtags: #NVIDIA #humanoidrobotik #kunstig intelligens #augmentedreality #robotudvikling

Sådan finder du det rette Metaverse-bureau, planlægningskontor eller konsulentfirma - Billede: Xpert.Digital

🗒️ At finde det rette Metaverse-bureau, planlægningskontor eller konsulentfirma – Søg og søg: De ti bedste tips til rådgivning og planlægning

Mere information her:

• Eksperter i Metaverse og XR: Find de rigtige partnere

Drag fordel af Xpert.Digital's omfattende, femdobbelte ekspertise i en omfattende servicepakke | R&D, XR, PR & optimering af digital synlighed - Billede: Xpert.Digital

Xpert.Digital besidder dybdegående viden på tværs af forskellige brancher. Dette giver os mulighed for at udvikle skræddersyede strategier, der er præcist afstemt med kravene og udfordringerne i dit specifikke markedssegment. Ved løbende at analysere markedstendenser og overvåge brancheudviklingen kan vi handle proaktivt og tilbyde innovative løsninger. Kombinationen af ​​erfaring og ekspertise skaber merværdi og giver vores kunder en afgørende konkurrencefordel.

Mere information her:

• Drag fordel af Xpert.Digital's 5 ekspertiseområder i én pakke – fra kun €500/måned

🚀🧠 Humanoide robotter: NVIDIA præsenterer nye teknologier og platforme til den næste AI-bølge

For at accelerere udviklingen af ​​humanoide robotter verden over tilbyder NVIDIA robotproducenter, AI-modeludviklere og softwareproducenter en række tjenester, modeller og computerplatforme til at designe, træne og bygge den næste generation af humanoide robotter.

Tilbuddene omfatter nye NVIDIA NIM™-mikrotjenester og frameworks til robotsimulering og -læring, NVIDIA Orchestration Service til kørsel af flertrins robotarbejdsbelastninger og en AI- og simuleringsassisteret teleoperationsarbejdsgang, der gør det muligt for udviklere at træne robotter med små mængder menneskelige demonstrationsdata.

"Den næste bølge af AI er robotteknologi, og en af ​​de mest spændende udviklinger er humanoide robotter," sagde Jensen Huang, grundlægger og administrerende direktør for NVIDIA. "Vi videreudvikler hele NVIDIAs robotstakk og åbner adgang for humanoide udviklere og virksomheder verden over til at bruge de platforme, accelerationsbiblioteker og AI-modeller, der bedst passer til deres behov."

🚀 Accelereret udvikling med NVIDIA NIM og OSMO

NIM Microservices tilbyder præbyggede containere drevet af NVIDIA-inferenssoftware, hvilket gør det muligt for udviklere at reducere implementeringstider fra uger til minutter. To nye AI-mikrotjenester giver robotteknikere mulighed for at forbedre simuleringsworkflows for generativ fysisk AI i NVIDIA Isaac Sim™, en referenceapplikation til robotsimuleringer bygget på NVIDIA Omniverse™-platformen.

MimicGen NIM-mikrotjenesten genererer syntetiske bevægelsesdata baseret på optagede teleopererede data fra rumlige computerenheder som Apple Vision Pro. Robocasa NIM-mikrotjenesten genererer robotopgaver og simuleringsklare miljøer i OpenUSD, et universelt framework for udvikling og samarbejde i 3D-verdener.

NVIDIA OSMO, der nu er tilgængelig, er en cloud-native administreret tjeneste, der gør det muligt for brugerne at orkestrere og skalere komplekse robotudviklingsworkflows på tværs af distribuerede computerressourcer, uanset om det er lokalt eller i skyen.

OSMO forenkler arbejdsgange for robottræning og simulering betydeligt og reducerer implementerings- og udviklingscyklusser fra måneder til mindre end en uge. Brugere kan visualisere og administrere en bred vifte af opgaver, såsom generering af syntetiske data, træningsmodeller, udførelse af forstærkningslæring og implementering af software-in-the-loop-testning i stor skala for humanoider, autonome mobile robotter og industrielle manipulatorer.

🤖 Fremskridt i dataindsamlingsworkflows for udviklere af humanoide robotter

Træning af grundlæggende modeller til humanoide robotter kræver en enorm mængde data. En måde at indsamle menneskelige demonstrationsdata på er via teleoperation, men dette bliver stadig dyrere og tidskrævende.

En referencearbejdsgang til teleoperationer understøttet af NVIDIA AI og Omniverse, demonstreret på SIGGRAPH-computergrafikkonferencen, gør det muligt for forskere og AI-udviklere at generere massive mængder syntetisk bevægelses- og perceptionsdata fra et minimalt antal demonstrationer af fjernoptagelser.

Først bruger udviklerne Apple Vision Pro til at optage et lille antal fjernbetjente demonstrationer. Derefter simulerer de optagelserne i NVIDIA Isaac Sim og bruger MimicGen NIM-mikrotjenesten til at generere syntetiske datasæt fra optagelserne.

Udviklere træner Project GR00T humanoid-basismodellen med reelle og syntetiske data, hvilket sparer dem tid og penge. De bruger derefter Robocasa NIM-mikroservicen i Isaac Lab, et robotlæringsframework, til at generere oplevelser til genoptræning af robotmodellen. Gennem hele arbejdsgangen allokerer NVIDIA OSMO problemfrit computeropgaver til forskellige ressourcer, hvilket sparer udviklerne uger af administrativt arbejde.

Fourier, en virksomhed med speciale i universelle robotplatforme, ser fordelene ved at bruge simuleringsteknologi til syntetisk at generere træningsdata.

"Udvikling af humanoide robotter er ekstremt komplekst – det kræver en utrolig mængde data fra den virkelige verden, som omhyggeligt indsamles i den virkelige verden," sagde Alex Gu, administrerende direktør for Fourier. "NVIDIAS nye simulerings- og generative AI-udviklingsværktøjer vil hjælpe med at accelerere og forenkle vores arbejdsgange inden for modeludvikling."

🌐 Udvidelse af adgangen til NVIDIA-teknologier for humanoide udviklere

NVIDIA tilbyder tre computerplatforme til at fremme udviklingen af ​​humanoide robotter: NVIDIA AI-supercomputere til træning af modeller; NVIDIA Isaac Sim, baseret på Omniverse, hvor robotter kan lære og forfine deres færdigheder i simulerede verdener; og NVIDIA Jetson™ Thor humanoide robotcomputere til at køre modellerne. Udviklere kan få adgang til og bruge alle – eller kun dele – af platformene, så de passer til deres specifikke behov.

Gennem et nyt NVIDIA Humanoid Robot Developer Program kan udviklere få tidlig adgang til de nye tilbud samt de nyeste versioner af NVIDIA Isaac Sim, NVIDIA Isaac Lab, Jetson Thor og Project GR00T universelle humanoide basismodeller.

1x, Boston Dynamics, ByteDance Research, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, Neura Robotics, RobotEra og Skild AI er blandt de første, der deltager i Early Access-programmet.

"Boston Dynamics og NVIDIA har en lang historie med tæt samarbejde for at flytte grænserne for, hvad der er muligt inden for robotteknologi," sagde Aaron Saunders, Chief Technology Officer hos Boston Dynamics. "Vi er begejstrede for at se frugterne af dette arbejde drive branchen fremad, og programmet for tidlig adgang er en fantastisk måde at få adgang til teknologi i verdensklasse."

📅 Tilgængelighed

Udviklere kan nu tilmelde sig NVIDIA Humanoid Robot Developer Program for at få adgang til NVIDIA OSMO og Isaac Lab, og vil snart få adgang til NVIDIA NIM Microservices.

Lær mere om den seneste udvikling inden for generativ kunstig intelligens og accelereret databehandling ved at se Huangs samtaler ved SIGGRAPH, den førende computergrafikkonference, der løber indtil 1. august i Denver.

Udviklere kan holde sig informeret om fremskridt inden for generativ AI og accelereret databehandling ved at deltage i de seneste sessioner og præsentationer på SIGGRAPH. Denne konference giver dem mulighed for at lære direkte af brancheledere, herunder NVIDIA, og holde sig opdateret om de nyeste innovationer og teknologier.

🤝 Deltagelse i NVIDIA Humanoid Robot Developer Program

For udviklere, der er interesserede i den løbende udvikling og optimering af humanoide robotter, tilbyder NVIDIA Humanoid Robot Developer Program unikke fordele. Tidlig adgang til de nyeste værktøjer og platforme giver dem mulighed for at reducere udviklingstiden betydeligt og bringe deres projekter hurtigere på markedet. Programmet er designet til at fremme et tæt samarbejde mellem NVIDIA og udviklere for at sikre, at de udviklede løsninger opfylder de højeste standarder og udnytter de nyeste teknologiske fremskridt.

🔧 NVIDIA adgang til disse banebrydende teknologier

NVIDIA fortsætter med at udvide og accelerere udviklingen af ​​humanoide robotter ved at introducere avancerede værktøjer og platforme. Med de nye NIM-mikrotjenester, OSMO-orkestreringstjenesten og innovative dataindsamlingsworkflows har udviklere de nødvendige ressourcer til yderligere at flytte grænserne for robotteknologi. Ved at give adgang til disse banebrydende teknologier giver NVIDIA udviklere verden over mulighed for at skabe mere robuste og intelligente humanoide robotter, der kan bruges i en bred vifte af applikationer. NVIDIAs engagement i denne branche demonstreres tydeligt af virksomhedens løbende investeringer og partnerskaber med førende aktører i branchen.

Udviklere, der ønsker at være på forkant med denne teknologiske revolution, inviteres til at deltage i NVIDIA Humanoid Robot Developer Program for at bruge de nyeste værktøjer og blive en del af et fællesskab af pionerer inden for humanoid robotteknologi. Ved at drage fordel af NVIDIAs ressourcer og support kan de øge deres innovationskapaciteter og drive udviklingen af ​​robotteknologi.

📣 Lignende emner

• 🤖 Adgang til NVIDIA NIM Microservices til robotsimuleringer
• 🚀 Accelereret udvikling af humanoide robotter med NVIDIA OSMO
• 💡 AI-understøttet teleoperationsworkflow til robotudvikling
• 🔧 NVIDIA OSMO: Cloud-native administreret tjeneste til robot-arbejdsgange
• 🧑‍💻 NVIDIA Isaac Sim og Isaac Lab til avancerede simuleringer
• 🌐 Fremskridt inden for generering af syntetisk træningsdata til humanoide robotter
• 👨‍🔬 NVIDIA Humanoid Robot-udviklerprogram: Tidlig adgang
• 👥 Partnerskab med branchegiganter som Boston Dynamics og Fourier
• 🍎 Apple Vision Pro og MimicGen til syntetiske bevægelsesdata
• 📅 Deltager i SIGGRAPH: NVIDIA præsenterer sine seneste innovationer

#️⃣ Hashtags: #Robotik #AI #HumanoidRobotter #NVIDIANIM #SIGGRAPH2024

Xpert.Digital - Pioner inden for forretningsudvikling

Smarte briller og AI - XR/AR/VR/MR-brancheekspert

Forbrugermetaverse eller metaverse generelt

Hvis du har spørgsmål, brug for yderligere information eller rådgivning, er du velkommen til at kontakte mig når som helst.

Konrad Wolfenstein

Jeg vil med glæde fungere som din personlige rådgiver.

Du kan kontakte mig ved at udfylde kontaktformularen nedenfor eller blot ringe til mig på +49 89 89 674 804 (München) .

Jeg glæder mig til vores fælles projekt.

Xpert.Digital er et knudepunkt for industrien med fokus på digitalisering, maskinteknik, logistik/intralogistik og solceller.

Med vores 360° forretningsudviklingsløsning understøtter vi anerkendte virksomheder fra nye forretninger til eftersalg.

Markedsinformation, smarketing, marketingautomatisering, indholdsudvikling, PR, postkampagner, personlige sociale medier og lead nurturing er en del af vores digitale værktøjer.

Du kan finde mere information på: www.xpert.digital - www.xpert.solar - www.xpert.plus