Humanoid Robotics: NVIDIA påskyndar utvecklingen av humanoidrobotar med utökad verklighet, AI och Omniverse (METAVERS)

🕶️🌐 Tekniska framsteg inom utökad verklighet (XR) och artificiell intelligens (AI) är imponerande och långtgående. Ett utmärkt exempel på denna utveckling är NVIDIAs arbete, ett företag som främst är känt för sina grafikkort, men som nu också har etablerat sig som en pionjär inom robotik. NVIDIA utnyttjar XR, AI och Omniverse (Metaverse) för att påskynda utvecklingen av humanoida robotar och sätta nya standarder.

🍏✨ Apple Vision Pros inverkan på XR-utvecklingen

Även om lanseringen av Apples Vision Pro väckte oro för att den kanske inte skulle bli en kommersiell succé, accelererade den utan tvekan utvecklingen av XR-applikationer (Extended Reality). XR, Augmented Reality (AR) och Mixed Reality (MR) har varit heta ämnen i åratal, men det förväntade genombrottet har ännu inte materialiserats. Detta betyder dock inte att XR som koncept har misslyckats. Tvärtom finns det många lovande användningsfall och utvecklingskoncept som pekar oss mot framtiden för XR-tekniken.

🤖🕶️ NVIDIA och styrning av robotar med XR

Nvidia styr robotar med Apple Vision Pro – Bild: NVIDIA

Ett fascinerande exempel nyligen är en video som släppts av NVIDIA som demonstrerar styrningen av en robot med Apple Vision Pro. I det här scenariot befinner sig en person i ett kök och styr en robot genom att anta robotens perspektiv genom Vision Pro-glasögonen. Handrörelserna som fångas upp av glasögonen överförs till roboten, vilket gör att personen kan styra den på distans. Detta möjliggör applikationer som att tillaga rostat bröd med honung, som styrs av personen själv.

Denna teknik har långtgående konsekvenser, särskilt i områden där den kan vara farlig för människor, såsom i byggnader som riskerar att rasa eller andra farliga miljöer. Det är lätt att föreställa sig hur denna teknik skulle kunna användas i räddningsuppdrag eller bombdestruktion.

🌟 Mer om detta i sista avsnittet nedan

Utvecklare får tillgång till nya NVIDIA NIM-mikrotjänster för robotsimuleringar i Isaac Lab och Isaac Sim, ”OSMO Robot Cloud Compute Orchestration Service”, ”Teleoperated Data Capture Workflow” och mer.

📊🛠️ Framsteg inom datainsamling och simulering för humanoida robotar

En av de största utmaningarna med att utveckla humanoida robotar är den enorma mängd data som krävs för att träna basmodellerna. För att förenkla och påskynda denna process har NVIDIA utvecklat arbetsflöden som möjliggör generering av stora mängder data från ett litet antal teleopererade demonstrationer. Denna data används sedan i simuleringsmiljöer som NVIDIA Isaac Sim för att skapa syntetiska datamängder och vidareutbilda modellerna.

Denna innovativa metod är även tydlig i användningen av MimicGen NIM-mikrotjänsten, som genererar syntetiska rörelse- och perceptionsdata. Detta sparar inte bara tid utan också betydande kostnader, eftersom mindre demonstrationsdata från verkligheten krävs.

🧠⚙️ AI:s roll inom robotik

”Nästa våg av AI är robotik, och en av de mest spännande utvecklingarna är humanoida robotar”, säger Jensen Huang, grundare och VD för NVIDIA. Denna vision driver NVIDIA att kontinuerligt utveckla sina plattformar och teknologier och göra humanoider tillgängliga över hela världen. Genom att tillhandahålla AI-modeller, simuleringsverktyg och datorresurser hjälper NVIDIA till att påskynda utvecklingen av humanoida robotar.

🧩🤝 Samarbets- och utvecklingsmöjligheter

NVIDIA har lanserat ett Humanoid Robot Developer Program för att ge utvecklare tidig tillgång till nya verktyg och plattformar. Företag som Boston Dynamics och Fourier är bland de första att dra nytta av detta program. Målet är att utnyttja den senaste tekniken tillsammans med partners och utveckla robotindustrin som helhet. Dessa samarbeten förkortar utvecklingscyklerna och får robotar ut på marknaden snabbare.

🚀🌟 Framtiden för humanoid robotik

Framstegen inom robotik och artificiell intelligens är imponerande och öppnar upp nya möjligheter för användningen av humanoida robotar. NVIDIA spelar en central roll i denna utveckling genom att skapa kraftfulla verktyg och plattformar som möjliggör effektivare träning och utplacering av humanoida robotar. Kombinationen av AR, AI och sofistikerade simuleringsverktyg revolutionerar utvecklingen och styrningen av dessa robotar.

Det ska bli spännande att se hur dessa tekniker utvecklas och inom vilka nya områden humanoida robotar kommer att användas. Potentiella tillämpningar sträcker sig från industriell automation och medicinsk hjälp till räddningsuppdrag och mer därtill. NVIDIA banar väg och visar genom sina innovationer att integrationen av AR och AI i robotteknik inte bara är möjlig utan också exceptionellt lovande. Utvecklingen inom detta område kan snart fundamentalt förändra våra dagliga liv.

📣 Liknande ämnen

• 🤖 NVIDIA och den humanoida robotrevolutionen: XR och AI i harmoni
• 🔧 NVIDIAs verktyg för att optimera humanoida robotar: Framsteg och innovationer
• 🌐 Apple Vision Pros roll i interaktionen mellan människa och robot
• 🚀 NVIDIA accelererar humanoid robotik med AI och simuleringstekniker
• 🚁 Humanoida robotar i farliga miljöer: Potentialer och tillämpningar
• 👾 Samarbete inom Humanoid Robot Developer Program: NVIDIA och dess partners
• 🏭 Industriella tillämpningar av humanoida robotar: En ny era av automatisering
• 🍏 Apple Vision Pros inverkan på AR och robotik
• 🔭 Framtiden för humanoid robotik: tillämpningar och utveckling
• 🌐 NVIDIA tar oss till Omniverse: Humanoida robotar i Metaverse

#️⃣ Hashtaggar: #NVIDIA #humanoidrobotar #artificiell intelligens #förstärkt verklighet #robotutveckling

Hitta rätt meta -vers byrå och planeringskontor som konsultföretag - Bild: Xpert.Digital

🗒 Hitta rätt meta -vers byrå och planeringskontor som konsultföretag - Sök och ville ha topp tio tips för råd och planering

Mer om detta här:

• Experter på Metaverse och XR: Hitta rätt partners

Dra nytta av Xpert.Digitals omfattande, femfaldiga expertis i ett heltäckande tjänstepaket | FoU, XR, PR och optimering av digital synlighet - Bild: Xpert.Digital

Xpert.Digital har djup kunskap i olika branscher. Detta gör att vi kan utveckla skräddarsydda strategier som är anpassade efter kraven och utmaningarna för ditt specifika marknadssegment. Genom att kontinuerligt analysera marknadstrender och bedriva branschutveckling kan vi agera med framsyn och erbjuda innovativa lösningar. Med kombinationen av erfarenhet och kunskap genererar vi mervärde och ger våra kunder en avgörande konkurrensfördel.

Mer om detta här:

• Använd 5 -Fold -kompetensen hos Xpert.digital i ett paket - från 500 €/månad

🚀🧠 Humanoida robotar: NVIDIA presenterar nya teknologier och plattformar för nästa AI-våg

För att påskynda utvecklingen av humanoida robotar världen över förser NVIDIA robottillverkare, AI-modellutvecklare och mjukvarutillverkare med en rad tjänster, modeller och datorplattformar för att designa, träna och bygga nästa generations humanoida robotar.

Erbjudandena inkluderar nya NVIDIA NIM™-mikrotjänster och ramverk för robotsimulering och -inlärning, NVIDIA Orchestration Service för att köra flerstegsrobotarbetsbelastningar och ett AI- och simuleringsassisterat teleoperationsarbetsflöde som gör det möjligt för utvecklare att träna robotar med små mängder mänsklig demonstrationsdata.

”Nästa våg av AI är robotik, och en av de mest spännande utvecklingarna är humanoida robotar”, säger Jensen Huang, grundare och VD för NVIDIA. ”Vi utvecklar hela NVIDIAs robotstack och öppnar upp för humanoida utvecklare och företag världen över att använda de plattformar, accelerationsbibliotek och AI-modeller som bäst passar deras behov.”

🚀 Snabbare utveckling med NVIDIA NIM och OSMO

NIM Microservices erbjuder färdiga containrar som drivs av NVIDIAs inferensprogramvara, vilket gör det möjligt för utvecklare att minska driftsättningstiderna från veckor till minuter. Två nya AI-mikrotjänster gör det möjligt för robottekniker att förbättra simuleringsarbetsflöden för generativ fysisk AI i NVIDIA Isaac Sim™, en referensapplikation för robotsimuleringar byggd på NVIDIA Omniverse™-plattformen.

MimicGen NIM-mikrotjänsten genererar syntetiska rörelsedata baserade på inspelad teleopererad data från rumsliga beräkningsenheter som Apple Vision Pro. Robocasa NIM-mikrotjänsten genererar robotuppgifter och simuleringsklara miljöer i OpenUSD, ett universellt ramverk för utveckling och samarbete i 3D-världar.

NVIDIA OSMO, nu tillgängligt, är en molnbaserad hanterad tjänst som gör det möjligt för användare att orkestrera och skala komplexa robotutvecklingsarbetsflöden över distribuerade datorresurser, oavsett om det är lokalt eller i molnet.

OSMO förenklar arbetsflöden för robotträning och simulering avsevärt, vilket minskar driftsättnings- och utvecklingscyklerna från månader till mindre än en vecka. Användare kan visualisera och hantera ett brett spektrum av uppgifter, såsom att generera syntetiska data, träna modeller, utföra förstärkningsinlärning och implementera mjukvaru-i-loop-testning i stor skala för humanoider, autonoma mobila robotar och industriella manipulatorer.

🤖 Framsteg i datainsamlingsarbetsflöden för utvecklare av humanoida robotar

Att träna grundläggande modeller för humanoida robotar kräver en enorm mängd data. Ett sätt att samla in data från mänskliga demonstrationer är genom teleoperation, men detta blir allt dyrare och tidskrävande.

Ett referensarbetsflöde för teleoperationer som stöds av NVIDIA AI och Omniverse, demonstrerat på SIGGRAPH-konferensen för datorgrafik, gör det möjligt för forskare och AI-utvecklare att generera massiva mängder syntetisk rörelse- och perceptionsdata från ett minimalt antal demonstrationer av fjärrfotografering.

Först använder utvecklarna Apple Vision Pro för att spela in ett litet antal teleopererade demonstrationer. Sedan simulerar de inspelningarna i NVIDIA Isaac Sim och använder mikrotjänsten MimicGen NIM för att generera syntetiska datamängder från inspelningarna.

Utvecklare tränar den humanoida basmodellen Project GR00T med verkliga och syntetiska data, vilket sparar tid och pengar. De använder sedan Robocasa NIM-mikrotjänsten i Isaac Lab, ett ramverk för robotikinlärning, för att generera upplevelser för omträning av robotmodellen. Genom hela arbetsflödet fördelar NVIDIA OSMO sömlöst datoruppgifter till olika resurser, vilket sparar utvecklarna veckor av administrativt arbete.

Fourier, ett företag som specialiserar sig på universella robotplattformar, ser fördelarna med att använda simuleringsteknik för att syntetiskt generera träningsdata.

”Att utveckla humanoida robotar är extremt komplext – det kräver en otrolig mängd verklig data, noggrant insamlad i den verkliga världen”, säger Alex Gu, VD för Fourier. ”NVIDIAS nya simulerings- och generativa AI-utvecklingsverktyg kommer att hjälpa till att accelerera och förenkla våra arbetsflöden för modellutveckling.”

🌐 Utökad tillgång till NVIDIA-teknik för humanoida utvecklare

NVIDIA tillhandahåller tre datorplattformar för att underlätta utvecklingen av humanoid robotteknik: NVIDIA AI-superdatorer för träningsmodeller; NVIDIA Isaac Sim, baserat på Omniverse, där robotar kan lära sig och förfina sina färdigheter i simulerade världar; och NVIDIA Jetson™ Thor humanoida robotdatorer för att köra modellerna. Utvecklare kan komma åt och använda alla – eller bara delar – av plattformarna för att passa sina specifika behov.

Genom ett nytt NVIDIA Humanoid Robot Developer Program kan utvecklare få tidig tillgång till de nya erbjudandena samt de senaste versionerna av NVIDIA Isaac Sim, NVIDIA Isaac Lab, Jetson Thor och Project GR00T universal-humanoida basmodeller.

1x, Boston Dynamics, ByteDance Research, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, Neura Robotics, RobotEra och Skild AI är bland de första som går med i Early Access-programmet.

”Boston Dynamics och NVIDIA har en lång historia av nära samarbete för att tänja på gränserna för vad som är möjligt inom robotik”, säger Aaron Saunders, teknisk chef på Boston Dynamics. ”Vi är glada över att se frukterna av det arbetet som driver branschen framåt, och programmet för tidig åtkomst är ett fantastiskt sätt att få tillgång till teknik i världsklass.”

📅 Tillgänglighet

Utvecklare kan nu gå med i NVIDIA Humanoid Robot Developer Program för att få tillgång till NVIDIA OSMO och Isaac Lab, och kommer snart att få tillgång till NVIDIA NIM Microservices.

Lär dig mer om den senaste utvecklingen inom generativ AI och accelererad databehandling genom att titta på Huangs samtal vid högtid på SIGGRAPH, den ledande datorgrafikkonferensen, som pågår till den 1 augusti i Denver.

Utvecklare kan hålla sig informerade om framsteg inom generativ AI och accelererad databehandling genom att delta i aktuella sessioner och presentationer på SIGGRAPH. Denna konferens ger dem möjlighet att lära sig direkt av branschledare, inklusive NVIDIA, och hålla sig uppdaterade om de senaste innovationerna och teknikerna.

🤝 Deltagande i NVIDIA Humanoid Robot Developer Program

För utvecklare som är intresserade av kontinuerlig utveckling och optimering av humanoida robotar erbjuder NVIDIA Humanoid Robot Developer Program unika fördelar. Tidig tillgång till de senaste verktygen och plattformarna gör det möjligt för dem att avsevärt minska utvecklingstiden och få ut sina projekt till marknaden snabbare. Programmet är utformat för att främja ett nära samarbete mellan NVIDIA och utvecklare för att säkerställa att de lösningar som utvecklas uppfyller de högsta standarderna och utnyttjar de senaste tekniska framstegen.

🔧 NVIDIA-åtkomst till dessa banbrytande tekniker

NVIDIA fortsätter att expandera och accelerera utvecklingen av humanoida robotar genom att introducera avancerade verktyg och plattformar. Med de nya NIM-mikrotjänsterna, OSMO-orkestreringstjänsten och innovativa datainsamlingsarbetsflöden har utvecklare de nödvändiga resurserna för att ytterligare tänja på gränserna för robotik. Genom att ge tillgång till dessa banbrytande tekniker ger NVIDIA utvecklare över hela världen möjlighet att skapa mer robusta och intelligenta humanoida robotar som kan användas i en mängd olika applikationer. NVIDIAs engagemang i denna bransch demonstreras tydligt av dess pågående investeringar och partnerskap med ledande branschaktörer.

Utvecklare som vill ligga i framkant av denna tekniska revolution är välkomna att gå med i NVIDIA Humanoid Robot Developer Program för att använda de senaste verktygen och bli en del av en gemenskap av pionjärer inom humanoidrobotik. Genom att dra nytta av NVIDIAs resurser och stöd kan de öka sina innovationsmöjligheter och driva robotikens utveckling.

📣 Liknande ämnen

• 🤖 Tillgång till NVIDIA NIM Microservices för robotsimuleringar
• 🚀 Snabbare utveckling av humanoida robotar med NVIDIA OSMO
• 💡 AI-stödt teleoperationsarbetsflöde för robotutveckling
• 🔧 NVIDIA OSMO: Molnbaserad hanterad tjänst för robotarbetsflöden
• 🧑‍💻 NVIDIA Isaac Sim och Isaac Lab för avancerade simuleringar
• 🌐 Framsteg inom generering av syntetisk träningsdata för humanoida robotar
• 👨‍🔬 NVIDIA Humanoid Robot-utvecklarprogram: Tidig åtkomst
• 👥 Partnerskap med branschjättar som Boston Dynamics och Fourier
• 🍎 Apple Vision Pro och MimicGen för syntetisk rörelsedata
• 📅 Deltar i SIGGRAPH: NVIDIA presenterar sina senaste innovationer

#️⃣ Hashtaggar: #Robotteknik #AI #Humanoidrobotar #NVIDIANIM #SIGGRAPH2024

Xpert.Digital - Pioneer Business Development

Smart Glasses & Ki - XR/AR/VR/MR Industry Expert

Konsument metaverse eller meta -verse i allmänhet

Om du har några frågor, ytterligare information och råd, vänligen kontakta mig när som helst.

Konrad Wolfenstein

Jag hjälper dig gärna som personlig konsult.

Du kan kontakta mig genom att fylla i kontaktformuläret nedan eller helt enkelt ringa mig på +49 89 674 804 (München) .

Jag ser fram emot vårt gemensamma projekt.

Xpert.Digital är ett nav för bransch med fokus, digitalisering, maskinteknik, logistik/intralogistik och fotovoltaik.

Med vår 360 ° affärsutvecklingslösning stöder vi välkända företag från ny verksamhet till efter försäljning.

Marknadsintelligens, smarketing, marknadsföringsautomation, innehållsutveckling, PR, postkampanjer, personliga sociala medier och blyomsorg är en del av våra digitala verktyg.

Du kan hitta mer på: www.xpert.digital - www.xpert.solar - www.xpert.plus