• Home
  • Chimica
  • Astronomia
  • Energia
  • Natura
  • Biologia
  • Fisica
  • Elettronica
  •  science >> Scienza >  >> Astronomia
    L'intelligenza artificiale aumenta le riprese lunari dell'Apollo a 60 FPS

    Attestazione:Dutchsteammachine

    Per quanto emozionante ed elettrizzante sia guardare tutti i filmati storici degli sbarchi sulla luna dell'Apollo, devi ammettere, la qualità a volte non è così eccezionale. Anche se la NASA ha lavorato per ripristinare e migliorare alcuni dei filmati Apollo più popolari, parte è ancora granulosa o sfocata.

    Ma ora, nuovi sviluppi nell'intelligenza artificiale sono venuti in soccorso, fornendo agli spettatori un'esperienza quasi completamente nuova nella visione del video storico di Apollo.

    Uno specialista nel restauro di foto e film che si fa chiamare DutchSteamMachine ha lavorato con la magia dell'intelligenza artificiale per migliorare il film Apollo originale, creazione di video e immagini straordinariamente chiari e vividi.

    "Volevo davvero offrire un'esperienza su questo vecchio filmato che non era mai stata vista prima, " ha detto a Universe Today.

    Dai un'occhiata a questo filmato migliorato di una traversata del rover lunare Apollo 16 con Charlie Duke e John Young, in cui il filmato originariamente girato a 12 fotogrammi al secondo ( fps) è stato aumentato a 60 fps:

    Sbalorditivo, Giusto? E sono rimasto sbalordito dalla vista nitida della superficie lunare in questa vista migliorata del sito di atterraggio dell'Apollo 15 ad Hadley Rille:

    Attestazione:Dutchsteammachine

    Oppure dai un'occhiata a quanto chiaramente Neil Armstrong è visibile in questa versione migliorata del video "primo passo" spesso visto dall'Apollo 11 ripreso da una videocamera da 16 mm all'interno del modulo lunare:

    Attestazione:Dutchsteammachine

    L'intelligenza artificiale utilizzata da DutchSteamMachine si chiama interpolazione dei fotogrammi video con riconoscimento della profondità, o DAIN in breve. Questa IA è open source, gratuito e in continuo sviluppo e miglioramento. L'interpolazione del movimento o l'interpolazione dei fotogrammi compensata dal movimento è una forma di elaborazione video in cui vengono generati fotogrammi di animazione intermedi tra quelli esistenti nel tentativo di rendere il video più fluido, per compensare la sfocatura, eccetera.

    "Le persone hanno utilizzato gli stessi programmi di intelligenza artificiale per riportare in vita le vecchie registrazioni di film del 1900, in alta definizione e colore, " ha detto. "Questa tecnica sembrava un'ottima cosa da applicare a filmati molto più recenti".

    Ma potresti non essere in grado di provarlo a casa. Ci vuole un potente, GPU di fascia alta con ventole di raffreddamento speciali. DutchSteamMachine ha affermato che un video di soli cinque minuti può richiedere da sei a 20 ore per essere completato. Ma i risultati parlano da soli.

    Ha spiegato come fa questo lavoro:"Per prima cosa ho cercato di trovare i video sorgente della più alta qualità, che fortunatamente ho trovato come file video 720p ad alto bitrate, " ha detto. "Quindi il problema della qualità è stato risolto. È importante iniziare con la fonte più alta possibile e modificare da lì. Però, la maggior parte delle sequenze girate era ancora molto discontinua. Questo perché per risparmiare pellicola e registrare per lunghi periodi di tempo, la maggior parte delle riprese del rover è stata girata alle 12, sei o anche un fotogramma al secondo. Mentre le persone hanno già provato ad applicare la stabilizzazione e/o i tipi di fusione dei fotogrammi per facilitare questo effetto, Non ne sono mai stato veramente soddisfatto".

    DutchSteamMachine cerca di determinare il framerate del filmato originale, che di solito si trova nei documenti della NASA o, come nel caso del filmato dell'Apollo 16 sopra, lo annunciano gli astronauti quando accendono la telecamera.

    "Sfortunatamente, A volte, il framerate sembra essere spento o fluttuante, non sempre funziona come previsto, " ha detto. "Quindi il modo migliore per trovare il framerate è ascoltare i punti di riferimento di cui parlano gli astronauti e abbinare il filmato a quello. Ho diviso il file sorgente in singoli frame PNG, immetterli nell'IA insieme al framerate in ingresso (uno, sei, 12 o 24) e il framerate di uscita desiderato per tasso di interpolazione (2x, 4x, 8x). L'intelligenza artificiale inizia a utilizzare la mia GPU e guarda due reali, frame consecutivi. Utilizzando algoritmi, analizza i movimenti degli oggetti nei due frame e ne rende di nuovi. Con un tasso di interpolazione di, Per esempio, 5x, è in grado di eseguire il rendering di cinque fotogrammi "falsi" da due soli fotogrammi reali. Se il filmato è stato registrato a 12 fps e la velocità di interpolazione è impostata su 5x, il framerate finale sarà 60, il che significa che con solo 12 fotogrammi reali, ha realizzato 48 fotogrammi "falsi". Entrambi vengono quindi esportati di nuovo in un video e riprodotti a 60 fps con i fotogrammi reali e falsi. Infine, applico la correzione del colore, spesso i file di origine hanno una tinta blu o arancione. Sincronizzo il filmato con l'audio, e se possibile, anche televisione e foto scattate contemporaneamente. Qualche volta, due fotocamere da 16 mm erano in funzione contemporaneamente, così posso riprodurli uno accanto all'altro."

    Ecco un video che ha condiviso del suo studio e della sua attrezzatura specializzata:

    Attestazione:Dutchsteammachine

    DutchSteamMachine fa questo lavoro nel suo tempo libero, e lo pubblica gratuitamente sulla sua pagina YouTube. Il suo slogan è "Preservare il passato per il futuro, " e usa le stesse tecniche anche per valorizzare vecchi home video, immagini e diapositive.

    "È fantastico leggere le reazioni delle persone sul mio filmato, " ha detto. "Quindi quando le persone pubblicano cose come, 'Oh! Questo è incredibile! Non l'ho mai visto prima!, 'questo mi fa andare avanti".

    Se desideri supportare l'incredibile lavoro di restauro/miglioramento che DutchSteamMachine sta facendo per il filmato Apollo, ecco la sua pagina Patreon. Sostenendo il suo lavoro, avrai degli extra, accesso anticipato e anteprime dei prossimi lavori, e la possibilità di porre domande sul processo. E ha intenzione di continuare a far venire tutto.

    "Ho intenzione di migliorare tonnellate di filmati Apollo come questo, " Ha detto. "Molto più spazio e filmati relativi alla storia verranno pubblicati continuamente sul mio canale YT." Ha anche una pagina Flickr con immagini più migliorate.


    © Scienza https://it.scienceaq.com