Microsoft heeft samengewerkt met Teachable AI Experiences en Xbox Game Studios’ Ninja Theory om een geavanceerd AI-model te introduceren dat game-ontwikkelaars zal ondersteunen. Het nieuwe model heet Muse.
Wat kan Muse?
Muse heeft de mogelijkheid om game-visuals en controlleracties te genereren door een 3D-begrip van een game te interpreteren. Het model is getraind op 1,6 miljard parameters, met behulp van een dataset van 1 miljard afbeeldingen en controlleracties – wat gelijkstaat aan ongeveer 7 jaar continu menselijk gameplay. De trainingsdata kwam voornamelijk uit het Bleeding Edge spel van Ninja Theory.
De gegevens werden verzameld met de toestemming van gebruikers die gameplay-gegevens hebben bijgedragen. Het model verwerkt visuals en opgenomen controlleracties met een resolutie van 300 x 180px. Als resultaat kan Muse tot 2-minuten sequenties genereren en de toekomstige evolutie van de game voorspellen in een wereldmodelmodus. Demo’s hebben aangetoond dat het model effectief camera-bewegingen, padkeuzes en zelfs de creatie van nieuwe personages kan aansteken, terwijl het de fysica van het spel volgt.
Microsoft is al begonnen Muse te gebruiken voor het ontwikkelen van real-time speelbare AI-modellen die zijn getraind in andere spellen. Deze mogelijkheid stelt ontwikkelaars in staat om te experimenteren met nieuwe concepten en mogelijk bestaande titels uit te breiden.
Een andere opwindende mogelijkheid is de implementatie van retro-games voor oude hardware. Het AI-model zou gebruikt kunnen worden om klassieke, vintage games aan te passen zodat ze werken op moderne machines.
De modelgewichten, monsterdata en het World and Human Action Model (WHAM) van Muse zijn allemaal toegankelijk via Azure AI Foundry. Daarnaast zullen interactieve AI-game-demo’s later dit jaar beschikbaar zijn via Copilot Labs.