Nvidia gebruikte AI om een game-omgeving te creëren op basis van beelden uit de echte wereld
1 minuut gelezen
Logo van Nvidia
Het bouwen van een realtime 3D-omgeving werd als een harde noot beschouwd, maar Nvidia heeft het gedaan. De chipontwerper heeft de hulp ingeroepen van kunstmatige intelligentie (AI) om een 3D-game-omgeving te creëren op basis van de afbeeldingen en video's die in het echte leven zijn gemaakt. Nvidia heeft vandaag aangekondigd dat ontwikkelaars nu kunnen renderen naar de 3D-omgeving met behulp van real-world video's.
Het nieuwe AI-systeem onthuld door Nvidia toonde aan dat verschillende elementen op straat te herkennen zijn. Elementen zoals geparkeerde auto's, gebouwen en trottoirs zijn allemaal gemodelleerd met behulp van AI. Dingen die in een realtime video verschijnen, kunnen vervolgens in het 3D-ontwerp worden weergegeven. Ze kunnen vervolgens worden gebruikt in games zoals racegames in de stad. In plaats van een nieuw ontwerp te maken, kan met het AI-systeem een renderversie van een stedelijke stad worden gemaakt.
Onderzoekers van Nvidia gebruikten neurale technologie om de 3D-renderomgeving van de echte wereld te creëren. Deze technologie kan goedkoper en minder tijdrovend blijken te zijn in vergelijking met de huidige 3D-weergave. Op dit moment moeten bedrijven elk object afzonderlijk in de virtuele wereld modelleren. Dit is de reden waarom de technologie van Nvidia een grote doorbraak is, omdat het een 3D-model kan maken van de realtime video of foto's.
Vice-president van Nvidia's Applied Deep Learning Research Center, Bryan Catanzaro, zei dat het de eerste keer is dat ze erin zijn geslaagd om interactieve afbeeldingen te maken met behulp van het neurale netwerk. Bryan gelooft dat neurale netwerken de manier waarop grafische afbeeldingen worden gemaakt, zullen veranderen. Door de technologie kunnen ontwikkelaars tegen lage kosten nieuwe scènes maken.
Voor de render 3D-graphics verzamelden onderzoekers eerst de gegevens uit een open source dataset. De dataset was in dit geval de videobeelden die waren opgesplitst in verschillende frames, zoals gebouwen, bomen en andere. Catanzaro legde uit dat de structuur van de wereld traditioneel wordt gemaakt met AI die er afbeeldingen voor genereert.
