Humanoid Robotics: NVIDIA urychluje vývoj humanoidních robotů s rozšířenou realitou, AI a Omniverse (Metaverse)
Zveřejněno dne: 14. srpna 2024 / Aktualizace z: 14. srpna 2024 - Autor: Konrad Wolfenstein
🤖⚙️ NVIDIA a budoucnost humanoidní robotiky: Pohled na vývoj v rozšířené realitě a AI
🕶️🌐 Technologický pokrok v rozšířené realitě (XR) a umělé inteligenci (AI) je působivý a dalekosáhlý. Vynikajícím příkladem tohoto vývoje je práce NVIDIA, společnosti, která je známá především svými grafickými kartami, ale nyní se etablovala také jako průkopník v oblasti robotiky. NVIDIA využívá XR, AI a Omniverse (Metaverse) k urychlení vývoje humanoidních robotů a stanovení nových standardů.
🍏✨ Vliv Apple Vision Pro na vývoj XR
Vydání Apple Vision Pro sice vyvolalo podezření, že nemusí mít komerční úspěch, ale nepochybně urychlilo vývoj aplikací XR (Extended Reality). XR, Augmented Reality (AR) nebo Mixed Reality (MR) jsou žhavým tématem už léta, ale na očekávaný průlom je zatím dlouho čekat. To však neznamená, že by XR jako koncept selhal. Naopak, existuje mnoho slibných případů použití a vývojových konceptů, které nám ukazují budoucnost technologie XR.
🤖🕶️ NVIDIA a ovládání robotů pomocí XR
Fascinujícím nedávným příkladem je video vydané společností NVIDIA, které ukazuje, jak ovládat robota pomocí Apple Vision Pro. V tomto scénáři je člověk v kuchyni a ovládá robota tím, že přijímá perspektivu robota přes brýle Vision Pro. Pohyby rukou detekované brýlemi jsou přenášeny do robota, což lidem umožňuje ovládat robota na dálku. To umožňuje aplikace, jako je příprava toastů s medem, kontrolovaná lidmi.
Tato technologie má dalekosáhlé důsledky, zejména v oblastech, kde může být nebezpečná pro lidi, jako jsou padající budovy nebo jiná nebezpečná prostředí. Je snadné si představit, jak by tato technologie mohla být použita při záchranných misích nebo k zneškodnění bomb.
🌟 Více o tom v poslední části níže
Vývojáři získají přístup k novým mikroslužbám NVIDIA NIM pro robotické simulace v Isaac Lab a Isaac Sim, OSMO Robot Cloud Compute Orchestration Service, Teleoperated Data Capture Workflow a dalším.
📊🛠️ Pokroky v získávání dat a simulaci pro humanoidní roboty
Jednou z největších výzev při vývoji humanoidních robotů je obrovské množství dat potřebných k trénování základních modelů. Aby to NVIDIA usnadnila a urychlila, vyvinula pracovní postupy, které umožňují generovat velké množství dat z malého počtu teleoperovaných ukázek. Tato data se pak použijí v simulačních prostředích, jako je NVIDIA Isaac Sim, k vytvoření syntetických datových sad a dalšímu trénování modelů.
Tento inovativní přístup je patrný také při použití mikroslužby MimicGen NIM, která generuje syntetická data o pohybu a vnímání. To nejen šetří čas, ale také značné náklady, protože je potřeba méně reálných demonstračních dat.
🧠⚙️ Role AI v robotice
„Další vlnou umělé inteligence je robotika a jedním z nejzajímavějších vývojů jsou humanoidní roboti,“ řekl Jensen Huang, zakladatel a generální ředitel společnosti NVIDIA. Tato vize pohání NVIDIA, aby neustále vyvíjela své platformy a technologie a zpřístupňovala humanoidy po celém světě. Poskytováním modelů umělé inteligence, simulačních nástrojů a výpočetních zdrojů pomáhá NVIDIA urychlit vývoj humanoidních robotů.
🧩🤝 Možnosti spolupráce a rozvoje
NVIDIA spustila program Humanoid Robot Developer Program, aby vývojářům umožnila včasný přístup k novým nástrojům a platformám. Společnosti jako Boston Dynamics a Fourier jsou mezi prvními, které z tohoto programu těží. Cílem je využívat nejnovější technologie společně s partnery a posunout robotický průmysl jako celek. Tato spolupráce umožňuje zkrátit vývojové cykly a rychleji připravit roboty na trh.
🚀🌟 Budoucnost humanoidní robotiky
Pokroky v robotice a umělé inteligenci jsou působivé a otevírají nové možnosti využití humanoidních robotů. NVIDIA hraje ústřední roli v tomto vývoji vývojem výkonných nástrojů a platforem, které umožňují efektivnější výcvik a nasazení humanoidních robotů. Kombinace AR, AI a komplexních simulačních nástrojů způsobí revoluci ve vývoji a ovládání těchto robotů.
Bude zajímavé sledovat, jak se budou tyto technologie vyvíjet v budoucnu a v jakých nových oblastech se humanoidní roboti uplatní. Potenciální aplikace sahají od průmyslové automatizace přes lékařskou pomoc až po záchranné mise a další. NVIDIA dláždí cestu a prostřednictvím svých inovací ukazuje, že integrace AR a AI do robotiky je nejen možná, ale také mimořádně slibná. Vývoj v této oblasti by mohl mít brzy trvalé změny v našem každodenním životě.
📣 Podobná témata
- 🤖 NVIDIA a revoluce humanoidní robotiky: XR a AI v harmonii
- 🔧 Nástroje NVIDIA pro optimalizaci humanoidních robotů: pokroky a inovace
- 🌐 Role Apple Vision Pro v interakci člověk-robot
- 🚀 NVIDIA urychluje humanoidní robotiku pomocí AI a simulačních technik
- 🚁 Humanoidní roboti v nebezpečných prostředích: Potenciály a aplikace
- 👾 Spolupráce v programu Humanoid Robot Developer Program: NVIDIA a její partneři
- 🏭 Průmyslové aplikace humanoidních robotů: Nová éra automatizace
- 🍏 Vliv Apple Vision Pro na AR a robotiku
- 🔭 Budoucnost humanoidní robotiky: Aplikace a vývoj
- 🌐 S NVIDIA do Omniverse: Humanoidní roboti v Metaverse
#️⃣ Hashtagy: #NVIDIA #humanoidrobotics #umělá inteligence #augmentedreality #roboticsdevelopment
🗒️ Xpert.Digital: Průkopník v oblasti rozšířené a rozšířené reality
🗒️ Najděte správnou agenturu Metaverse a plánovací kancelář, jako je poradenská firma – vyhledejte a vyhledejte deset nejlepších tipů pro poradenství a plánování
Více o tom zde:
🎯🎯🎯 Využijte rozsáhlé, pětinásobné odborné znalosti Xpert.Digital v komplexním balíčku služeb | R&D, XR, PR & SEM
Xpert.Digital má hluboké znalosti z různých odvětví. To nám umožňuje vyvíjet strategie šité na míru, které jsou přesně přizpůsobeny požadavkům a výzvám vašeho konkrétního segmentu trhu. Neustálou analýzou tržních trendů a sledováním vývoje v oboru můžeme jednat s prozíravostí a nabízet inovativní řešení. Kombinací zkušeností a znalostí vytváříme přidanou hodnotu a poskytujeme našim zákazníkům rozhodující konkurenční výhodu.
Více o tom zde:
🤖🌍 NVIDIA urychluje vývoj humanoidních robotů pro globální budoucnost
🚀🧠 Humanoidní roboti: NVIDIA představuje nové technologie a platformy pro další vlnu AI
Pro urychlení vývoje humanoidních robotů po celém světě poskytuje NVIDIA výrobcům robotů, vývojářům AI modelů a výrobcům softwaru řadu služeb, modelů a počítačových platforem pro návrh, výcvik a stavbu nové generace humanoidních robotů.
Nabídka zahrnuje nové mikroslužby a rámce NVIDIA NIM™ pro simulaci a učení robotů, službu NVIDIA Orchestration Service pro spouštění vícestupňových robotických úloh a pracovní postup teleoperace s umělou inteligencí a simulací, který umožňuje vývojářům stavět roboty s malým množstvím demonstračních dat. vlak.
„Další vlnou umělé inteligence je robotika a jedním z nejzajímavějších vývojů jsou humanoidní roboti,“ řekl Jensen Huang, zakladatel a generální ředitel společnosti NVIDIA. „Rozvíjíme celý robotický balík NVIDIA a otevíráme přístup humanoidním vývojářům a společnostem po celém světě, aby mohli využívat platformy, knihovny akcelerátorů a modely AI, které nejlépe vyhovují jejich potřebám.“
🚀 Zrychlený vývoj s NVIDIA NIM a OSMO
NIM Microservices poskytuje předpřipravené kontejnery poháněné inferenčním softwarem NVIDIA, což umožňuje vývojářům zkrátit dobu nasazení z týdnů na minuty. Dvě nové mikroslužby umělé inteligence umožňují robotikům vylepšit pracovní postupy simulace pro generativní fyzickou umělou inteligenci v NVIDIA Isaac Sim™, robotické simulační referenční aplikaci postavené na platformě NVIDIA Omniverse™.
MimicGen NIM Microservice generuje syntetická pohybová data na základě zaznamenaných teleoperovaných dat z prostorových počítačových zařízení, jako je Apple Vision Pro. Robocasa NIM Microservice generuje robotické úlohy a prostředí připravená na simulaci v OpenUSD, univerzálním rámci pro vývoj a spolupráci ve 3D světech.
NVIDIA OSMO, nyní k dispozici, je cloudově nativní spravovaná služba, která uživatelům umožňuje organizovat a škálovat složité pracovní postupy vývoje robotů napříč distribuovanými výpočetními zdroji, ať už on-premise nebo v cloudu.
OSMO dramaticky zjednodušuje trénink a simulaci robotů, zkracuje cykly nasazení a vývoje z měsíců na méně než týden. Uživatelé mohou vizualizovat a spravovat různé úkoly – jako je generování syntetických dat, trénovací modely, provádění učení výztuže a implementace rozsáhlého testování softwaru ve smyčce pro humanoidy, autonomní mobilní roboty a průmyslové manipulátory.
🤖 Pokroky v pracovních postupech zpracování dat pro vývojáře humanoidních robotů
Trénink základních modelů pro humanoidní roboty vyžaduje obrovské množství dat. Jedním ze způsobů, jak shromáždit data z lidských demonstrací, je použití teleoperace, ale to je stále dražší a časově náročnější.
Referenční pracovní postup teleoperace poháněný NVIDIA AI a Omniverse, předvedený na konferenci o počítačové grafice SIGGRAPH, umožňuje výzkumníkům a vývojářům AI generovat obrovské množství syntetických dat o pohybu a vnímání z minimálního počtu demonstrací vzdáleného snímání.
Za prvé, vývojáři používají Apple Vision Pro k záznamu malého počtu teleoperovaných ukázek. Poté simulují nahrávky v NVIDIA Isaac Sim a používají mikroslužbu MimicGen NIM ke generování syntetických datových sad z nahrávek.
Vývojáři trénují základní model humanoidů Project GR00T pomocí skutečných a syntetických dat, což vývojářům šetří čas a náklady. Poté použijí mikroslužbu Robocasa NIM v Isaac Lab, rámec pro učení robotů, ke generování zkušeností pro přeškolení modelu robota. V průběhu pracovního postupu NVIDIA OSMO hladce přiřazuje výpočetní úlohy různým zdrojům, což vývojářům ušetří týdny administrativních úkolů.
Fourier, společnost zabývající se univerzální robotickou platformou, vidí výhodu použití simulační technologie k syntetickému generování tréninkových dat.
„Vývoj humanoidních robotů je extrémně složitý – vyžaduje neuvěřitelné množství reálných dat, která jsou pečlivě sbírána v reálném světě,“ řekl Alex Gu, generální ředitel společnosti Fourier. „Nové simulační a generativní vývojářské nástroje AI společnosti NVIDIA pomohou urychlit a zjednodušit naše pracovní postupy při vývoji modelů.“
🌐 Rozšíření přístupu k technologiím NVIDIA pro humanoidní vývojáře
NVIDIA poskytuje tři výpočetní platformy pro usnadnění vývoje humanoidní robotiky: superpočítač NVIDIA AI pro trénování modelů; NVIDIA Isaac Sim, založená na Omniverse, kde se roboti mohou učit a zdokonalovat své dovednosti v simulovaných světech; a humanoidní robotický počítač NVIDIA Jetson™ Thor pro řízení modelů. Vývojáři mohou přistupovat a používat všechny – nebo jen části – platforem pro své specifické potřeby.
Prostřednictvím nového programu NVIDIA Humanoid Robot Developer Program mohou vývojáři získat včasný přístup k novým nabídkám a také k nejnovějším verzím základních humanoidních základních modelů NVIDIA Isaac Sim, NVIDIA Isaac Lab, Jetson Thor a Project GR00T.
1x, Boston Dynamics, ByteDance Research, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, Neura Robotics, RobotEra a Skild AI jsou mezi prvními, kteří se do programu včasného přístupu zapojí.
„Boston Dynamics a NVIDIA mají dlouhou historii úzké spolupráce, aby posouvaly hranice toho, co je v robotice možné,“ řekl Aaron Saunders, technologický ředitel Boston Dynamics. „Jsme nadšeni, když vidíme, že plody této práce posouvají průmysl jako celek a program Early Access je fantastický způsob, jak získat přístup k technologiím světové třídy.“
📅 Dostupnost
Vývojáři se nyní mohou připojit k programu NVIDIA Humanoid Robot Developer Program a získat přístup k NVIDIA OSMO a Isaac Lab a brzy získají přístup k NVIDIA NIM Microservices.
Zjistěte více o nejnovějším vývoji v oblasti generativní umělé inteligence a zrychlených výpočtů sledováním Huangových chatů u ohně na SIGGRAPH, přední konferenci o počítačové grafice, která probíhá do 1. srpna v Denveru.
Vývojáři se mohou i nadále učit o pokrocích v generativní umělé inteligenci a zrychleném počítání navštěvováním nejnovějších relací a prezentací SIGGRAPH. Tato konference jim nabízí příležitost učit se přímo od lídrů v oboru, včetně společnosti NVIDIA, a zůstat v obraze o nejnovějších inovacích a technologiích.
🤝 Účast v programu NVIDIA Humanoid Robot Developer Program
Vývojářům se zájmem o neustálý vývoj a optimalizaci humanoidních robotů nabízí program NVIDIA Humanoid Robot Developer Program jedinečné výhody. Díky včasnému přístupu k nejnovějším nástrojům a platformám mohou výrazně zkrátit dobu vývoje a rychleji uvést své projekty na trh. Program je navržen tak, aby podporoval úzkou spolupráci mezi společností NVIDIA a vývojáři, aby bylo zajištěno, že vyvinutá řešení splňují nejvyšší standardy a využívají nejnovější technologický pokrok.
🔧 Přístup NVIDIA k těmto špičkovým technologiím
NVIDIA pokračuje v rozšiřování a urychlování vývoje humanoidních robotů zaváděním pokročilých nástrojů a platforem. S novými mikroslužbami NIM, orchestrační službou OSMO a inovativními pracovními postupy zpracování dat mají vývojáři zdroje, které potřebují k dalšímu posouvání hranic robotiky. Poskytnutím přístupu k těmto špičkovým technologiím umožní NVIDIA vývojářům po celém světě vytvářet robustnější a inteligentnější humanoidní roboty, které lze použít v různých aplikacích. Oddanost společnosti NVIDIA tomuto odvětví je jasně demonstrována prostřednictvím jejích pokračujících investic a partnerství s předními průmyslovými hráči.
Vývojáři, kteří chtějí být v čele této technologické revoluce, jsou zváni, aby se připojili k programu NVIDIA Humanoid Robot Developer Program, aby využili nejnovějších nástrojů a stali se součástí komunity průkopníků v oblasti humanoidní robotiky. Díky využití zdrojů a podpory NVIDIA mohou zvýšit své inovace a pokročit ve vývoji robotiky.
📣 Podobná témata
- 🤖 Přístup k mikroslužbám NVIDIA NIM pro simulace robotů
- 🚀 Zrychlený vývoj humanoidních robotů s NVIDIA OSMO
- 💡 Pracovní postup teleoperace s umělou inteligencí pro vývoj robotů
- 🔧 NVIDIA OSMO: Cloudová nativní spravovaná služba pro robotické pracovní postupy
- 🧑💻 NVIDIA Isaac Sim a Isaac Lab pro pokročilé simulace
- 🌐 Pokroky v generování syntetických tréninkových dat pro humanoidní roboty
- 👨🔬 NVIDIA Humanoid Robot Developer Program: Předběžný přístup
- 👥 Partnerství s průmyslovými giganty, jako jsou Boston Dynamics a Fourier
- 🍎 Apple Vision Pro a MimicGen pro syntetická pohybová data
- 📅 Účast na SIGGRAPH: NVIDIA představuje nejnovější inovace
#️⃣ Hashtagy: #Robotics #AI #HumanoidRobots #NVIDIANIM #SIGGRAPH2024
Jsme tu pro Vás - poradenství - plánování - realizace - projektové řízení
Xpert.Digital – Pioneer Business Development
Máte-li jakékoli dotazy, další informace nebo potřebujete poradit na téma Consumer Metaverse nebo Metaverse obecně, neváhejte mě kdykoli kontaktovat.
Rád posloužím jako váš osobní poradce.
Můžete mě kontaktovat vyplněním kontaktního formuláře níže nebo mi jednoduše zavolejte na číslo +49 89 89 674 804 (Mnichov) .
Těším se na náš společný projekt.
Xpert.Digital - Konrad Wolfenstein
Xpert.Digital je centrum pro průmysl se zaměřením na digitalizaci, strojírenství, logistiku/intralogistiku a fotovoltaiku.
S naším 360° řešením pro rozvoj podnikání podporujeme známé společnosti od nových obchodů až po poprodejní služby.
Market intelligence, smarketing, automatizace marketingu, vývoj obsahu, PR, e-mailové kampaně, personalizovaná sociální média a péče o potenciální zákazníky jsou součástí našich digitálních nástrojů.
Více se dozvíte na: www.xpert.digital - www.xpert.solar - www.xpert.plus