Ecco una stringa di parole su cui riflettere:Grafica interattiva AI. Nvidia è l'atto principale. I cervelloni della GPU sono completamente dietro a un prossimo capitolo, "AI, " per l'industria grafica. Succedono cose fantastiche quando metti in gioco un sistema di rete neurale per mondi virtuali basati su riprese video.

La creazione di una scena digitale realistica richiede normalmente molta (e molta) pazienza. "Ora possiamo semplicemente scaricare il lavoro su un algoritmo di intelligenza artificiale, " disse Will Knight, nel suo sguardo a ciò su cui sta lavorando Nvidia, in Revisione della tecnologia del MIT .

Nvidia annuncia quello che ha detto essere il primo mondo virtuale interattivo con intelligenza artificiale, e l'ha definita una "svolta dell'intelligenza artificiale". Il team di ricercatori è stato guidato da Bryan Catanzaro, vicepresidente, apprendimento profondo applicato. "In realtà stiamo insegnando al modello come disegnare sulla base di un video reale, " ha detto in Revisione della tecnologia del MIT .

I frame sono resi dalla tecnologia AI, detto ricercatore, Ting Chun Wang. In altre parole, il team ha addestrato una rete neurale per il rendering di ambienti 3D dopo essere stato addestrato su video esistenti.

Le scoperte iniziano con la domanda di qualcuno. A Nvidia, la domanda what-if era, e se potessimo addestrare un modello di intelligenza artificiale per disegnare nuovi mondi basati solo su video del mondo reale? Così, ora è un affare fatto nella tecnologia che mostra tale generazione di immagini.

Gli utenti target sono sviluppatori e artisti. L'idea è per loro di creare mondi virtuali 3D interattivi per il settore automobilistico, giochi o realtà virtuale.

Sono stati selezionati video di città per il rendering dell'ambiente urbano su cui hanno addestrato la rete neurale.

"Ci hanno dato sequenze di guida di diverse città, " ha detto Ting-Chun Wang. Poi hanno usato un'altra rete di segmentazione, per estrarre la semantica di alto livello, Egli ha detto, da quelle sequenze.

Il motore UE4 ha aiutato a generare i layout colorati:a oggetti diversi sono stati dati colori diversi. La rete a sua volta converte la rappresentazione in immagini.

[UE4 si riferisce a Unreal Engine 4. Il Verge lo descrisse come "un motore popolare utilizzato per titoli come Fortnite, PUBG, Gears of War 4, e molti altri." Il sito Unreal Engine 4 ha affermato che si tratta di "una suite completa di strumenti di sviluppo di giochi realizzati da sviluppatori di giochi, per gli sviluppatori di giochi."]

Nvidia ha mostrato i suoi progressi alla conferenza NeurIPS a Montreal, Canada, uno spettacolo incentrato sulla ricerca sull'intelligenza artificiale.

Sì, ma, a parte il fattore gee-whiz, qual e il punto? La creazione di contenuti è costosa e questo percorso di intelligenza artificiale consente di risparmiare denaro e tempo. Nuovo Atlante ha osservato che "Per rendere i mondi virtuali più immersivi, gli artisti hanno bisogno di riempirli di edifici, rocce, alberi, e altri oggetti. Creare e posizionare rapidamente tutti questi oggetti virtuali comporta tempi e costi di sviluppo piuttosto elevati."

Per lo sviluppo di giochi o altre applicazioni, Nvidia ha esplorato un metodo che avrebbe consentito agli sviluppatori di creare a un costo inferiore, utilizzando l'intelligenza artificiale che impara dal mondo reale. Il comunicato stampa ha sottolineato che poiché l'output è generato sinteticamente, "una scena può essere facilmente modificata per rimuovere, modificare, o aggiungere oggetti."

James Vincent in Il Verge ha guidato i lettori attraverso lo sforzo di ricerca di Nvidia:

"Il problema è, se gli algoritmi di deep learning stanno generando la grafica per il mondo a una velocità di 25 fotogrammi al secondo, come fanno a mantenere gli oggetti uguali? Catanzaro afferma che questo problema significava che i risultati iniziali del sistema erano "dolorosi da guardare" poiché i colori e le trame "cambiavano ogni fotogramma". Il team ha fornito al sistema la memoria a breve termine, e quindi potrebbe confrontare un nuovo telaio con quello che è andato prima. Come tale, crea nuovi frame coerenti con ciò che è sullo schermo.

Il comunicato stampa di Nvidia afferma che "questa ricerca è in fase iniziale".

© 2018 Science X Network