Microsofts generativa Xbox AI-modell Muse: ”World and Human Action Model” (WHAM) – Framtiden för spelutveckling

Artificiell intelligens i spel: Microsoft presenterar WHAM för Muse

Spelindustrin genomgår en transformation, och artificiell intelligens spelar en allt viktigare roll. Microsoft har introducerat Muse, nästa generations generativa AI-modell, ett lovande verktyg som fundamentalt kan förändra hur spel utvecklas. Muse är baserad på World and Human Action Model (WHAM) och utvecklades i samarbete med den välrenommerade studion Ninja Theory.

Vad är Muse och varför är det unikt?

Muse är en spännande innovation eftersom den har en djup förståelse för 3D-spelvärldar, spelfysik och spelarinteraktioner. Till skillnad från konventionella AI-modeller som utför specifika uppgifter har Muse tränats att förstå komplexa relationer inom spel och generera nytt spelinnehåll baserat på denna förståelse.

Viktiga funktioner i Muse inkluderar:

• Skapa realistiska spelvärldar: Muse kan generera kompletta, dynamiska miljöer baserade på minimal input, som reagerar logiskt på spelarens handlingar.
• Förbättrad spelfysik: Tack vare den djupgående analysen av kollisioner, rörelser och objektdynamik säkerställer Muse en naturlig spelfysik.
• Generering av intelligenta NPC-interaktioner: Modellen kan skapa AI-styrda karaktärer som fattar trovärdiga beslut baserat på spelarinteraktioner.
• Automatiserad speloptimering: Muse kan justera och förbättra spelmekaniken i realtid för att optimera spelarupplevelsen.
• Adaptiv balansering: Beroende på användarens spelstil kan modellen justera balanseringen av vapen, fiender och utmaningar.

Modellen tränades med hjälp av Ninja Theorys flerspelarspel Bleeding Edge, vilket gav den tillgång till en mängd olika spelsituationer och mekaniker.

Potentiella användningsområden för Muse inom spelutveckling

Muses potentiella tillämpningar är långtgående och skulle kunna revolutionera många processer inom spelindustrin:

1. Effektivare spelutveckling

Utveckling av videospel är ofta en långdragen och dyr process. Muse kan hjälpa utvecklare att designa spelmekaniker och nivåer snabbare genom att automatiskt generera förslag på design, NPC:er och miljöer. Detta gör att utvecklare kan fokusera på finjustering och kreativ design istället för tidskrävande teknisk implementering.

2. Prototypframtagning och snabbtestning

Xbox Game Studios utforskar för närvarande hur Muse kan användas i tidig prototyputveckling. Istället för att lägga månader på att arbeta med en initial speluppsättning skulle Muse kunna skapa funktionella spelmekaniker inom några dagar, vilka sedan skulle kunna förfinas ytterligare av utvecklare.

3. Spelarretention genom automatisk speljustering

Ett centralt problem för många utvecklare är långsiktig spelarlojalitet. Muse kan hjälpa till att dynamiskt anpassa spel genom att generera personliga utmaningar baserade på användarnas spelstilar. Detta kan till exempel innebära att motståndare blir smartare eller mer utmanande i realtid för att ge en konstant utmaning.

4. Automatisk optimering av gamla spel för moderna plattformar

Många klassiska spel i spelhistorien är svåra att porta till moderna plattformar. Muse skulle kunna hjälpa till att föra gamla spel till nya miljöer genom att automatiskt uppdatera kod, anpassa spelmekanik och föreslå grafiska förbättringar.

Ett verktyg för att stödja, inte ersätta, kreativitet

Microsoft betonar att Muse inte är avsett att ersätta mänskliga utvecklare, utan snarare att fungera som ett kompletterande verktyg. Kreativa processer som berättande, karaktärsdesign och atmosfärsskapande kommer att förbli i händerna på människor. Muse stöder helt enkelt snabbare och effektivare implementering av tekniska och mekaniska aspekter.

Som Microsoft själva säger: ”Muse är en accelerator för innovation, inte en ersättning för mänsklig fantasi.”

Kritiska röster och utmaningar

Trots de lovande möjligheterna finns det också kritiska röster från utvecklargemenskapen:

• Etik och förlorade jobb: Vissa branschexperter befarar att Muse kan äventyra jobb inom spelutveckling på lång sikt, eftersom fler och fler uppgifter automatiseras.
• Kvalitetskontroll: Även om Muse kan hjälpa till att generera innehåll snabbare, uppstår frågan om dessa automatiskt genererade element har samma kvalitet och noggrannhet som mänskligt skapade spelelement.
• Tekniska begränsningar: Trots Muses enorma potential är tekniken fortfarande i ett tidigt skede. Oförutsebara fel eller ännu inte helt färdigutvecklade mekaniker kan påverka dess acceptans i spelbranschen.

Framtiden för Muse och generativ AI i spel

Microsofts beslut att göra Muse tillgängligt för andra utvecklare och forskare via Azure AI Foundry visar företagets höga förhoppningar om AI:s potential. Denna öppenhet skulle kunna påskynda utvecklingen ytterligare och leda till att fler och fler studior integrerar Muse eller liknande tekniker i sina arbetsflöden.

Muses framtid beror på hur väl de lyckas upprätthålla en balans mellan automatisering och kreativ frihet. Om Microsoft framgångsrikt visar att Muse är ett värdefullt verktyg för utvecklare, kan modellen inleda en ny era inom spelutveckling.

De närmaste åren kommer att visa i vilken utsträckning generativ AI verkligen kan revolutionera hur spel skapas. En sak är dock säker: med Muse har Microsoft lagt en spännande grund för spelindustrins framtid.

Från barerna till Global: SMES erövrar världsmarknaden med en smart strategi - Bild: Xpert.Digital

Vid en tidpunkt då det digitala närvaron av ett företag beslutar om sin framgång, kan utmaningen med hur denna närvaro utformas autentiskt, individuellt och omfattande. Xpert.Digital erbjuder en innovativ lösning som positionerar sig som en korsning mellan ett industriellt nav, en blogg och en varumärkesambassadör. Den kombinerar fördelarna med kommunikations- och försäljningskanaler i en enda plattform och möjliggör publicering på 18 olika språk. Samarbetet med partnerportaler och möjligheten att publicera bidrag till Google News och en pressdistributör med cirka 8 000 journalister och läsare maximerar innehållet och synligheten för innehållet. Detta representerar en viktig faktor i extern försäljning och marknadsföring (symboler).

Mer om detta här:

• Äkta. Individuellt. Global: Xpert.Digital -strategin för ditt företag

Paradigmskifte i spelvärlden: Generativ AI i fokus

I den snabba världen av videospelsutveckling, där innovation och kreativitet är hörnstenarna för framgång, pågår ett paradigmskifte. Artificiell intelligens (AI) är inte längre bara ett futuristiskt koncept eller ett verktyg för att automatisera repetitiva uppgifter; den utvecklas till en kreativ partner, en meddesigner med potential att fundamentalt förändra hur spel utformas, utvecklas och upplevs. Microsoft har tagit ett betydande steg i denna riktning med introduktionen av "Muse", en generativ AI-modell specifikt utformad för spelutveckling.

Gårdagens publicering av Microsofts "World and Human Action Models" i den prestigefyllda tidskriften "Nature" markerar en vändpunkt. Det är inte en stegvis förbättring av befintlig teknik, utan ett fundamentalt nytt tillvägagångssätt. "World and Human Action Model" (WHAM), även känt internt på Microsoft som "Muse ", är mer än bara ytterligare ett AI-verktyg. Det är ett omfattande system som kan generera spelgrafik, designa kontrollåtgärder eller till och med skapa båda samtidigt. Denna möjlighet att generera kreativt innehåll från grunden öppnar helt nya horisonter för spelutvecklare och lovar att accelerera, demokratisera och framför allt göra utvecklingsprocessen mer kreativ.

Utvecklingen av Muse är resultatet av ett nära samarbete mellan teamen på Microsoft Research Game Intelligence och Teachable AI Experiences (Tai X), samt de erfarna spelutvecklarna på Ninja Theory, en Xbox Game Studios-studio. Detta tvärvetenskapliga samarbete, som kombinerar akademisk forskning med praktisk expertis inom spelutveckling, är en avgörande faktor för Muses framgång. Det säkerställer att AI-tekniken inte förblir i forskningens elfenbenstorn, utan är direkt anpassad till spelutvecklingsbranschens behov och utmaningar.

En anmärkningsvärd aspekt av Muse-initiativet är Microsofts beslut att göra modellviktningar och exempeldata tillgängliga som öppen källkod. Samtidigt släpps ett körbart program, "WHAM Demonstrator". Denna demonstrator fungerar som ett intuitivt gränssnitt som gör det möjligt för utvecklare att interagera direkt med WHAM-modellerna och kontrollera olika aspekter av modellen. Genom att släppa demonstratorn som öppen källkod skickar Microsoft en stark signal om öppenhet och samarbete inom AI-forskning. Utvecklare över hela världen uppmanas att experimentera med Muse, utöka dess möjligheter och skapa sina egna innovativa applikationer. Experimentmiljön på Azure AI Foundry erbjuder en idealisk ram för dessa utforskningar.

Inspirerad av ChatGPT: Ett paradigmskifte inom AI-forskning och dess inverkan på spelvärlden

Inspirationen till Muse och Microsofts ökade fokus på generativ AI inom spelutveckling kan spåras tillbaka till den banbrytande framgången med ChatGPT. OpenAIs lansering av ChatGPT i december 2022 revolutionerade hela AI-landskapet och demonstrerade imponerande potentialen hos stora språkmodeller att hantera komplexa och kreativa uppgifter. Denna händelse fungerade som en katalysator och förstärkte Microsofts övertygelse om att generativ AI också skulle kunna spela en transformerande roll inom videospelsindustrin.

Microsoft insåg tidigt att samma principer som gjorde ChatGPT så framgångsrikt även kunde tillämpas på spelutveckling. Tanken var att utveckla en AI-modell som inte bara kunde utföra fördefinierade uppgifter utan också självständigt fatta kreativa beslut och generera nytt, innovativt spelinnehåll. Målet med forskningsprojektet var ambitiöst: att utforska hur moderna AI-modeller fundamentalt kan förändra hur videospel utvecklas och upplevs. Muse är resultatet av denna vision och förkroppsligar ambitionen att etablera AI inte bara som ett verktyg, utan som en integrerad del av den kreativa processen inom spelutveckling.

Speldatas betydelse: Bleeding Edge som en unik forskningsbas

En avgörande faktor i utvecklingen av Muse var tillgången till omfattande och högkvalitativ speldata. Microsoft har arbetat nära Ninja Theory i åratal, särskilt i samband med 4v4-multiplayerspelet "Bleeding Edge", som släpptes 2020. Detta samarbete gjorde det möjligt för Microsoft att skapa en unik databas som var avgörande för att träna och validera Muse.

Insamling och användning av speldata har alltid skett i enlighet med strikta etiska riktlinjer och efterlevnadsstandarder. Dataskydd och skydd av spelarnas integritet var högsta prioritet. Gavin Costello, teknisk chef på Ninja Theory, betonade vikten av detta samarbete och värdet av de insikter som erhölls: ”Det var fascinerande att se hur Microsoft Research använde Bleeding Edge-data för att utforska nya AI-tekniker – från den initiala integrationen av AI i spelet till utvecklingen av AI-agenter som liknar mänskliga spelare.” Detta uttalande understryker att samarbetet inte var begränsat till datainsamling utan också omfattade ett kontinuerligt utbyte av kunskap och expertis mellan forskning och spelutveckling.

Data från "Bleeding Edge" gav en idealisk grund för att träna Muse, eftersom den omfattade ett brett spektrum av spelsituationer, spelarhandlingar och interaktioner. Flerspelarspel som "Bleeding Edge" genererar naturligtvis en enorm mängd data som är ovärderlig för att träna AI-modeller. Denna data inkluderar inte bara de visuella aspekterna av spelet utan också detaljerad information om spelarrörelser, beslut, strategier och dynamisk interaktion med spelvärlden. Denna mångfald och komplexitet hos data gjorde det möjligt för Muse att utveckla en djup förståelse för videospelsdynamik och att generera realistiskt och kreativt spelinnehåll.

Skalbarhet och tekniska framsteg: Från V100 till H100 GPU:er

En viktig milstolpe i Muse-projektet var den framgångsrika skalningen av träningsprocessen. Att träna komplexa AI-modeller som Muse kräver enorm datorkraft. I början av projektet demonstrerades det i en V100-klustermiljö att modellträning effektivt kunde skalas till upp till 100 grafikprocessorer (GPU:er). Denna framgång var avgörande, eftersom den visade att träning kunde utföras effektivt även med ökande datavolym och modellkomplexitet.

Med utgångspunkt i dessa resultat genomfördes övergången till att använda H100-GPU:er i storskaliga träningskörningar. H100-GPU:er representerar den senaste generationen av högpresterande GPU:er och erbjuder betydligt högre datorkraft än sina föregångare. Användningen av H100-GPU:er gjorde det möjligt att träna Muse i ännu större skala och ytterligare förbättra dess kapacitet. Denna tekniska utveckling var en nyckelfaktor i de imponerande resultat som uppnåddes med Muse.

Ett avgörande ögonblick var presentationen av Tim Pearce från Game Intelligence-teamet, där han demonstrerade inlärningskurvorna för Muse-modellen över olika träningsfaser. De visualiserade resultaten visade tydligt hur Muse kände igen skalbara mönster i speldata under träning och lärde sig att använda dessa mönster för att generera nytt spelinnehåll. Denna förmåga att extrahera abstrakta mönster från stora datamängder och använda dem för kreativa ändamål är ett kännetecken för avancerade generativa AI-modeller och understryker Muses innovativa potential för AI-driven spelutveckling.

Tvärvetenskapligt samarbete och integration av kreativa sinnen

Vid sidan av tekniska framsteg spelade tvärvetenskapligt samarbete en central roll i Muse-projektet. Från början var Muses utveckling tänkt som ett gemensamt projekt mellan AI-forskare, spelutvecklare och kreativa yrkesverksamma. Denna strategi syftade till att säkerställa att AI-tekniken inte bara var tekniskt mogen utan också mötte behoven och kraven från den kreativa spelutvecklingsbranschen.

Ett centralt fokus i projektet var systematisk utvärdering och praktisk tillämpning av tekniken. Vid sidan av forskning om linjär funktionsutvinning, onlinebaserade utvärderingsmetoder och generering av visuella element och handlingar – initialt sammanfattat under termen "Full Dreaming" – var den centrala frågan hur Muse effektivt kunde användas i verkliga kreativa processer. I detta sammanhang hänvisar "Full Dreaming" till den metod där AI genererar spelinnehåll helt autonomt, utan några uttryckliga instruktioner eller begränsningar från utvecklaren. Denna metod syftar till att fullt ut utnyttja AI:s kreativa potential och generera oväntade och innovativa spelidéer.

I nära samarbete med Teachable AI Experiences-teamet, lett av Cecily Morrison, och med erfarna speldesigners som Linda Wen och Martin Grayson, utforskades systematiskt potentialen hos generativ AI för kreativa tillämpningar. Teachable AI Experiences-teamet bidrog med expertis inom användarvänlig design av AI-system, medan speldesigners bidrog med sin omfattande erfarenhet av spelkonception och -utveckling. Detta samarbete möjliggjorde utvecklingen av Muse inte bara som en kraftfull AI-modell utan också som ett verktyg som är tillgängligt och intuitivt för kreativa yrkesverksamma.

WHAM-demonstratorn: Ett interaktivt fönster in i framtidens spelutveckling

Resultaten av praktiska tester och tvärvetenskapligt samarbete kulminerade i utvecklingen av WHAM Demonstrator. Denna demonstrator är ett interaktivt användargränssnitt som gör det möjligt för utvecklare att interagera direkt med AI-modellen Muse och uppleva dess möjligheter i praktiken. WHAM Demonstrator fungerar som en slags "lekplats" för kreatörer, där de kan experimentera med Muse, justera olika parametrar och visualisera det genererade spelinnehållet i realtid.

Med hjälp av demonstratorn identifierades och validerades systematiskt tre viktiga utvärderingsegenskaper hos Muse: konsekvens, mångfald och uthållighet. Dessa tre egenskaper är avgörande för den praktiska tillämpbarheten och det kreativa värdet av Muse inom spelutveckling.

konsistens

I detta sammanhang betyder konsekvens att Muse genererar spelsekvenser som beter sig realistiskt och trovärdigt. Ett viktigt exempel på konsekvens är Muses förmåga att hindra karaktärer från att gå genom väggar eller utföra andra fysiskt omöjliga handlingar. Denna konsekvens bidrar till att de genererade spelvärldarna och spelupplägget känns trovärdigt och uppslukande. Det är en avgörande faktor för att spelutvecklare och spelare ska acceptera AI-genererat innehåll.

Mångfald

Mångfald hänvisar till Muses förmåga att generera ett brett utbud av olika spelupplevelser och spelinnehåll, även med identiska eller liknande indata. En enda indata kan resultera i en mängd olika spelscenarier som varierar i spelupplägg, nivådesign, karaktärsinteraktioner och andra aspekter. Denna mångfald är ovärderlig för kreativ utforskning och idégenerering inom spelutveckling. Den gör det möjligt för utvecklare att snabbt och enkelt generera och utvärdera en mängd olika spelidéer utan att behöva skapa tidskrävande manuella prototyper.

Uthållighet

Persistens beskriver Muses förmåga att hållbart integrera förändringar i spelupplägget eller spelvärlden. Om till exempel en ny karaktär läggs till i en befintlig scen eller en spelregel ändras, tar Muse hänsyn till dessa förändringar när de genererar efterföljande spelinnehåll. Denna persistens är avgörande för att säkerställa att AI-genererade spelvärldar och spelupplägg förblir sammanhängande och konsekventa, även om de modifieras eller utökas över tid. Det gör det möjligt för utvecklare att iterativt arbeta med spelidéer och kontinuerligt förfina och anpassa det AI-genererade innehållet.

Genom kontinuerlig optimering av Muse, särskilt genom användning av ytterligare H100 GPU-resurser och förbättrade bildgeneratorer, har modellens prestanda förbättrats ytterligare. Alla sju kartor i spelet "Bleeding Edge" har nu integrerats i Muse, vilket avsevärt utökar variationen och omfattningen av genererbara spelvärldar. Imponerande videor som demonstrerar två minuter långa spelsekvenser illustrerar tydligt mångfalden, realismen och den kreativa kvaliteten hos innehållet som genereras av Muse. Dessa videor ger övertygande bevis på Muses transformerande potential för spelutveckling.

Outlook och öppen källkodsversionen: En gåva till spelutvecklarcommunityn

Resultaten av denna tvärvetenskapliga forskning publicerades inte bara i den välrenommerade tidskriften "Nature" utan gjordes även tillgängliga för allmänheten. Utöver den vetenskapliga publikationen görs Muse, WHAM-demonstratorn och tillhörande exempeldata tillgängliga för allmänheten. Denna öppen källkodsversion är ett viktigt steg som syftar till att främja vidareutveckling och tillämpning av Muse av utvecklare över hela världen.

Microsofts beslut att släppa Muse och WHAM-demonstratorn som öppen källkod understryker företagets engagemang för öppenhet och innovation inom AI-forskning. Genom att göra dessa tekniker tillgängliga för communityn hoppas Microsoft kunna främja ett bredare införande och tillämpning av generativ AI inom spelutveckling och starta en ny våg av kreativ innovation. Den öppna källkodsversionen gör det möjligt för utvecklare att anpassa Muse till sina specifika behov, skapa sina egna tillägg och modifieringar och integrera tekniken i sina egna projekt.

Framstegen med Muse öppnar upp nya perspektiv för den framtida utvecklingen av videospel och AI-drivna spelupplevelser. Innovativa projekt testas redan på Xbox, där de bygger vidare på Muses kapacitet och utforskar potentialen hos generativ AI inom spelutveckling. Dessa projekt sträcker sig från automatisk generering av nivådesigner och spelvärldar till skapandet av dynamiska och personliga spelupplevelser.

Ett nytt kapitel inom spelutveckling: AI som kreativ partner

Microsofts forskning med Muse visar tydligt hur tekniska framsteg, drivna av modeller som ChatGPT, kan leda till banbrytande innovationer inom spelutveckling. Muse är mer än bara ett tekniskt verktyg; det är en katalysator för kreativa processer, en meddesigner som hjälper spelutvecklare att förverkliga sina visioner snabbare, mer effektivt och mer innovativt. Utvecklingen av Muse markerar början på ett nytt kapitel inom spelutveckling, där AI inte bara fungerar som ett verktyg för automatisering utan som en integrerad del av den kreativa processen.

Potentialen för generativ AI inom spelutveckling är enorm och sträcker sig långt bortom automatisk generering av spelinnehåll. AI-modeller som Muse kan bidra till att demokratisera spelutvecklingsprocessen genom att ge mindre studior och oberoende utvecklare tillgång till avancerad teknik. De kan minska utvecklingskostnader, förkorta utvecklingstider och samtidigt främja kreativ mångfald och innovation i branschen.

Dessutom har generativ AI potential att möjliggöra personliga och dynamiska spelupplevelser som anpassar sig till spelarnas preferenser och beteenden i realtid. Tänk dig spel som dynamiskt anpassar sin svårighetsgrad, berättande och spelupplägg till spelaren, eller spelvärldar som kontinuerligt utvecklas baserat på spelarens beslut och handlingar. Muse och liknande AI-modeller banar väg för den här typen av revolutionerande spelupplevelser och lovar att forma framtiden för spelutveckling på ett bestående sätt.

Det är viktigt att betona att AI inom spelutveckling inte bör ses som en ersättning för mänsklig kreativitet och expertis, utan snarare som ett verktyg som kompletterar och förbättrar den. De bästa resultaten uppnås när AI och mänsklig kreativitet arbetar hand i hand, när AI agerar som en kreativ partner, inspirerar, stödjer och ger utvecklare möjlighet att förverkliga sina visioner. Muse är ett lovande steg i denna riktning och ett slående exempel på hur AI kan revolutionera spelutveckling och inleda en ny era av kreativa möjligheter.

☑ SME -stöd i strategi, rådgivning, planering och implementering

☑ skapande eller omjustering av den digitala strategin och digitaliseringen

☑ Expansion och optimering av de internationella försäljningsprocesserna

☑ Globala och digitala B2B -handelsplattformar

☑ Pioneer Business Development

Konrad Wolfenstein

Jag hjälper dig gärna som personlig konsult.

Du kan kontakta mig genom att fylla i kontaktformuläret nedan eller helt enkelt ringa mig på +49 89 674 804 (München) .

Jag ser fram emot vårt gemensamma projekt.

Xpert.Digital är ett nav för bransch med fokus, digitalisering, maskinteknik, logistik/intralogistik och fotovoltaik.

Med vår 360 ° affärsutvecklingslösning stöder vi välkända företag från ny verksamhet till efter försäljning.

Marknadsintelligens, smarketing, marknadsföringsautomation, innehållsutveckling, PR, postkampanjer, personliga sociala medier och blyomsorg är en del av våra digitala verktyg.

Du kan hitta mer på: www.xpert.digital - www.xpert.solar - www.xpert.plus