Kako umjetna inteligencija i oblak brišu granice u snimanju filmova i TV-a

Ako se čini da su razgovori o umjetnoj inteligenciji i računalstvu u oblaku posvuda ovih dana, ne samo u razrijeđenim tehnološkim i ulagačkim krugovima, to je istina. I nigdje to nije tako istinito nego u zabavnom biznisu, gdje su kreativna i poslovna klasa zabrinute o mogućim implikacijama za umijeće koje su godinama usavršavali, i uzbuđene zbog demokratizacijske moći tehnologija.

Na nedavnom filmskom festivalu Sundance razgovarao sam s brojnim redateljima, montažerima i drugima koji koriste novu umjetnu inteligenciju i mogućnosti prijenosa iz oblaka u kameru koje transformiraju filmsku i TV produkcijski proces, te s rukovoditeljima s Adobeom, koji čini naširoko korišten softver za uređivanje Premiere Pro i druge alate za omogućavanje kreativnosti.

To je izvanredno vrijeme, koje se brzo razvija, s pozitivnim i negativnim predviđanjima bez daha, ali i s nekim sjajnim prilikama za preuređenje načina na koji su film i TV (nazovimo ih samo na temelju videa) nastajali više od stoljeća.

Prihvaćanje industrije tek je počelo. ComcastCMCSA
, na primjer, upravo primljeno tehnički Emmy za korištenje umjetne inteligencije za brzo generiranje sportskih video zapisa.

Zvijezde i njihovi predstavnici također to primjećuju, jer se AI tehnologije pojavljuju čak iu specijaliziranim kutovima industrije.

Na primjer, agencija za talente CAA je potpisao strateško partnerstvo s tvrtkom Metaphysic, koja pruža alate za "odležavanje" u Ovdje, film Miramax temeljen na grafičkom romanu. Zvijezde Tom Hanks i Robin Wright glumit će likove u jednoj prostoriji koji stare kroz mnogo godina, od svoje davne mladosti nadalje.

Za agenciju je privlačnost takve tehnologije očigledna: njihove najveće zvijezde/klijenti odjednom su održivi u više uloga, desetljećima dulje.

Uporne mogućnosti nove tehnologije

Ali iz dana u dan otvaraju se mogućnosti za montažere, redatelje i druge koji su uključeni u složen zadatak stvaranja projekta temeljenog na videu. U razgovorima s nadobudnim autorima čiji indie i dokumentarni projekti popunjavaju raspored Sundancea, jasno je da vide Premiere Pro kao platformu za suradnju velike brzine koja omogućuje sve veći niz mogućih kreativnih upotreba, od strane sve većeg broja mogućih kreatora.

Adobe-oveADBE
Meagan Keane, direktorica marketinga proizvoda za profesionalni video, nazvala je umjetnu inteligenciju “velikim otvaračem vrata mogućnosti kada razmišljamo o budućnosti snimanja filmova. Mislimo da je budućnost za sve.”

Pod tim misli kako umjetna inteligencija može povećati ljudsku kreativnost, a ne zamijeniti je, kako se neki boje. Alati koji se pokreću umjetnom inteligencijom mogli bi osnažiti kreatore sa skromnim ili nikakvim tehničkim vještinama, resursima ili vezama s modno uvjerljivim projektima u videu i drugim medijima. Čak i sada, za profesionalne kreatore, umjetna inteligencija smanjuje zahtjevnost ponavljajućih zadataka kao što je prolaženje kroz snimku za određenu scenu, dopuštajući montažerima i drugim kreatorima da se usredotoče na (doslovno) širu sliku.

Ali to je veće od toga, rekao je Michael Cioni, Adobeov viši direktor za globalne inovacije i dugogodišnji prvak tehnologija kamera-u-oblaku s Frame.io u vlasništvu Adobea.

Svaka digitalna imovina također je imovina u oblaku

On to jednostavno kaže: “Do 2031. godine, svaka elektronička imovina koja se generira u medijima i zabavi bit će generirana u oblaku, putem oblaka. To je istina. Ja to nazivam tehnološkom sigurnošću, da će svaka elektronička imovina koju generira uređaj biti generirana u oblaku” umjesto na, recimo, lokalnom tvrdom disku, celuloidu, videovrpci ili memorijskoj kartici.

U poznatom ciklusu transformacije medija, tekstualni dokumenti prvi su krenuli u oblak (i ​​AI). Sada se rutinski stvaraju, dijele i preoblikuju na uslugama temeljenim na oblaku kao što su Google Docs, Apple Pages, Microsoft Word i Adobeov Acrobat. Stotine milijuna ljudi slušaju (i stvaraju, surađuju i prodaju) glazbu na oblaku, zahvaljujući Spotifyju, Apple Musicu, Amazon Musicu, Tidalu i drugima. Sada mijenja najsloženije medije koje stvaramo.

"Recimo da radite filmsku scenu", rekao je Cioni. “Moći ćete zapravo utipkati na jeziku, nakon snimanja scene: 'Neka pada kiša.' I voda će se pojaviti u kadru, počet će kiša. 'Make it snow', i počet će se pojavljivati ​​u kadru. A za to nećete morati biti inženjer. To se doista čini kao znanstvena fantastika, ali postat će sasvim izvedivo. Vidimo da se to događa u vrlo ranim fazama fotografija (fotografija), a znamo da će se pretočiti u video. I to je jako važan atribut u kojem moramo razmišljati o tome kako to utječe na kreativne ljude.”

To ima gomilu implikacija na budućnost izrade pokretnih slika. Kao što je Leonard Cohen davno rekao, dok je od pjesnika postao romanopisac i pjevač/tekstopisac u svojim 30-ima, "granice između mnogih nastojanja su izblijedjele."

Mnogi mlađi filmaši rutinski prelaze te granice, radeći pomalo sve u izradi svojih projekata i rutinski surađujući na digitalnim platformama. Uz isporuku iz oblaka u kameru i pametnu umjetnu inteligenciju, mogu snimiti scenu, brzo generirati grubi "sklop" kao početno mjesto za uređivanje, dok određuju ima li dovoljno da scena "radi" ili je potrebno više snimanja .

Također mogu grubo napraviti osnovne vizualne efekte, korekciju boja, pa čak i dizajn zvuka prije nego što ga predaju stručnjacima na fino ugađanje. Kao takav, Premiere je za mnoge kreatore Sundancea postao više od tradicionalnog nelinearnog programa za uređivanje videa.

Izgradnja novog odnosa između ljudi i slika

"Ovo je jedna od naših najvećih strasti: odnos između ljudi i kamera i kako to utječe na društvo", rekao je Maximilien Van Aertryck, suredatelj (i suurednik) provokativnog dokumentarca Fantastičan stroj, Koji osvojio posebnu nagradu žirija Sundancea za kreativnu viziju. “Mi smo poput antropologa koji se vole zabavljati.”

Njihov dokumentarac nježno poziva na promišljen pristup svijetu koji stvaramo ovim novim alatima. Kako je glasio stari politički vic, "kome ćeš vjerovati: meni ili svojim lažljivim očima?" Sve više moramo razumjeti kada naše oči ima laži i pokretnim slikama treba vjerovati, rekao je Aertryckov suredatelj/urednik, Axel Danielson.

"Film nema mnogo odgovora", rekao je Danielson. “Ima pitanja. Jedini odgovor koji znamo je da mi kao društva kolektivno moramo vrlo ozbiljno shvatiti medijsku pismenost.”

Projekt spaja više od stoljeća pokretnih slika, vraćajući se na pionire kao što je Georges Melies (čiji bi kraljevski podanik uzviknuo što je postalo ime filma). Usput se zaustavlja na uznemirujuće strastvenoj Leni Riefenstahl, koja reproducira svoje omiljene snimke s nacističkog skupa u Nürnbergu, i ISIS-ovom borcu koji opetovano kvari svoje riječi u snimci s trakama iz videa regrutiranja terorista. Sadrži i daleko nježnije dijelove, ali poanta je da će kreatori, sjajni i grozni, iskoristiti nove alate na mnogo načina.

On Fantastičan stroj, Van Aertryck i Danielson proveli su godine prikupljajući osebujne isječke o kompliciranom odnosu između ljudi/kamera i slika koje stvaraju. Kad je došlo vrijeme za sastavljanje filma, radili su na daljinu s montažerom Mikel Cee Karlsson i izvršnim producentom Rubenom Ostlundom, dvaput nominiranim za Oscara scenaristom i redateljem (Trokut tuge) čija je Plattform Produktion producirala film.

“Mi nismo školovani urednici; mi to radimo jer to moramo učiniti,” rekao je Van Aertryck. "Adobe postaje savršen alat za nas, jer sve možemo ubaciti unutra i dijeliti napred-nazad."

Četvorica su koristila Premiereove alate temeljene na oblaku za razmjenu isječaka i sekvenci kao da sjede za stolom, rekao je Van Aertryck, iako su bili rašireni po zapadnoj Europi od Baltika (Göteborg, Švedska) do Baleara (Mallorca). To je posebno dalekosežan primjer slobode koju daje kreatorima da dođu s bilo kojeg mjesta i rade bilo gdje, ako to žele ili trebaju.

"Mogućnost dijeljenja na mreži čini mnogo više mogućim", rekao je Crystal Kayiza, scenaristica i redateljica Odmaralište, koji je osvojio nagradu žirija Sundancea za američki kratki film. "Ako se želim vratiti u Oklahomu, mogu to učiniti ako sam u (stvaranju) kratkog filma."

Prošle godine Adobe je najavio nove mogućnosti izravnog povezivanja u oblak u nekim popularnim kamerama i drugim produkcijskim uređajima koji istovremeno prenose video zapis dok se snima. To omogućuje montažerima, producentima, rukovoditeljima i drugim stručnjacima za postprodukciju da započnu rad na snimci nekoliko minuta nakon što je snimljena.

Čak i male proizvodnje koriste tehnologiju. Veze s oblakom bile su bitne, osobito u ranoj fazi stvaranja Odlazak na Sveučilište u Mariachi, rekla je Daniela T. Quiroz, koja je osvojila nagradu za uređivanje na Sundanceu.

Redatelji Alejandra Vasquez i Sam Osborn još su snimali dokumentarac o srednjoškolskim plesnim natjecanjima u dolini Rio Grande u Teksasu kada je Quiroz iz Brooklyna počeo slagati projekt. Njezin rani i svježi pogled na već snimljeni materijal pomogao je u oblikovanju kasnijih snimanja i područja fokusa.

“Kao urednici, imamo jedinstvenu privilegiju vidjeti te ljude pred kamerama po prvi put,” rekao je Quiroz. "Stvarno možete vidjeti u koga se zaljubljujete i u koju glazbu se zaljubljujete."

Bez tih odmah dostupnih digitalnih dnevnih novina, poput "starih dana" prije samo nekoliko godina, bilo je nužno u snimanju Ponekad razmišljam o smrti na lokaciji u udaljenom dijelu obale Oregona. Umjesto toga, snimke svakog dana učitavane su na tvrde diskove, a zatim slane preko noći u New Orleans kako bi se ubacile u digitalne posrednike. Bio je to podsjetnik na poboljšanja koja je tehnologija donijela, rekao je urednik Ryan Kendrick.

Nova vrsta suradnje

To je omogućilo Kendricku iz Nashvillea da započne montažu, surađujući s redateljicom Rachel Lambert i drugima u više država.

"Kako je super što mogu raditi s kim želim, a nismo vezani za isto mjesto", rekao je Kendrick. Također mijenja dinamiku između redatelja, snimatelja, montažera i ostatka produkcije.

"U prošlosti ste se uvijek osjećali izolirano od setova", rekao je Kendrick. “Sada se osjećaš povezanije s tim. Ne osjećate se toliko odvojeno od tona koji proizvode. Soba za uređivanje je stvarno sjajno mjesto gdje možete griješiti i činiti apsolutno suprotno od onoga što želite. Uvijek kažem: 'Ne znam. Idemo to shvatiti.'”

On Ponekad se osjećam kao da umirem, Kendrick, Lambert i direktor fotografije Dustin Lane počeli su razgovarati svaki tjedan mnogo prije nego što je snimanje zapravo počelo, kako bi što prije otklonili potencijalne probleme.

"Razgovarali bismo o problemima s uređivanjem koji bi se mogli pojaviti", rekao je Kendrick. “Kada dobijete scenarije, najteže je razmišljati o tome kako će film prijeći na sljedeći dio. Konkretno, u filmu (glavni junaci) idu u kino. Puno smo razgovarali o tome kako ćemo dobiti slike koje su nam potrebne da zadržimo emocionalnu težinu.”

Brzi preokreti mogući uz Camera-to-Cloud posebno su korisni za kratke projekte kao što su reklame i glazbeni spotovi, rekao je Kendrick.

"Neki preokreti u reklamama su divlji", rekao je Kendrick. Mogućnost slanja projekata naprijed-natrag u Premiere Pro, Frame.io i After Effects doista je bila izvediva samo s arhitekturom temeljenom na oblaku.

"To je najveće (kašnjenje u proizvodnim radnim procesima) koje je eliminirano u posljednjih pet godina", rekao je Kendrick.

Vodeći principi izgradnje bolje tehnologije

Adobeov pristup svojim tehnologijama izgrađen je oko pet "vodećih načela": tijek rada, mediji, suradnja, produktivnost i sigurnost, rekao je Keane.

"Mi stvarno stavljamo AI u 'produktivnost'", rekao je Keane. “Ne radi se o zamjeni kreativaca. Radi se o zamjeni ovozemaljskog.”

Hollywoodski sindikati pomno prate prostor umjetne inteligencije koji se brzo mijenja. Puck je izvijestio da odbor najvećeg hollywoodskog sindikata, SAG-AFTRA, planira uključiti pitanje prava na sličnost – korištenje umjetne inteligencije za ponovno stvaranje izgleda, glasa ili drugih aspekata svojih članova – u nadolazeće ugovorne pregovore.

Za sada su odvjetnici za talente obaviješteni da je "svaki tekst u ugovoru koji navodno kontrolira pravo na simulaciju izvedbe glumaca, 'ništavan i neprovediv dok se uvjeti ne ispregovaraju sa sindikatom'", izvijestio je Puck .

Složeno novo pitanje moglo bi dovesti do nekih teških pregovora o ugovoru ovog proljeća. Mlađi i sredovječni izvođači koji žele produžiti svoje karijere mogu prihvatiti neke načine upotrebe tehnologije, ali bez jake ugovorne zaštite, neki bi mediji mogli koristiti tehnologiju kao način da izbjegnu plaćanje digitalnih izvedbi koje tehnički nisu glumci.

Jedan grubi primjer onoga što bi na kraju moglo doći mogao se tjednima pronaći na Twitchu, gdje je "watchmeforever" stvorio beskrajna "epizoda" koju je generirala umjetna inteligencija Seinfeld. "Emisija" je sadržavala loše izražene, računalno generirane glasove, jednostavnu grafiku i šale koje nisu bile osobito smiješne. Emisija također sugerira što bi u konačnici moglo biti moguće na puno višoj razini kvalitete. Vrijedno je napomenuti da je beskonačna petlja prekinuta obavijesti o gašenju kada je rutina ustajanja lika "Jerry" skrenula u ono što se smatralo anti-trans rutinom.

Otvaranje svijeta kreativnim traganjima

S mnogo pozitivnije strane, Keane iz Adobea ukazuje na daleko širi pristup kreativnim alatima koje će pokretati umjetna inteligencija i oblak. Uklanja potrebu za velikim farmama renderiranja za generiranje procesnih slika i zvuka, generiranje efekata i ostalo, dok i dalje pruža računalnu snagu i sigurnost koje treba svaki umjereno ambiciozan video projekt.

"Ako možete centralizirati oblak, možete otvoriti mogućnost da priče dolaze iz cijelog svijeta", rekao je Keane. “Suradnja mora biti u svakoj fazi. Zajednička perspektiva ili osnažuje vaše ideje ili vas dodatno izaziva.”

Kao primjer važnosti sigurnosti za filmaše, Keane je istaknuo Plan C, dokumentarni film Sundancea o pobačaju. Njegovi su kreatori trebali višestruko zamutiti lica i glasove nekih intervjua pred kamerom, kao i željeznu sigurnost za nezamućene izvorne medije.

Eksplozija generativne umjetne inteligencije, dubokih krivotvorina i srodnih problema također znači da je autentičnost važnija nego ikada, rekao je Keane. Adobe je član Inicijative za autentičnost sadržaja, uz druge medijske i tehnološke tvrtke kao što je New York TimesNYT
i Canon.

Keanu Reeves, zvijezda kultne znanstveno-fantastične franšize Matrica, manje je sangviničan. Nedavno je rekao za Wired da jedna zlonamjerna upotreba videa potpomognutog umjetnom inteligencijom, stvarajući deepfakes, je "strašno". Reevesovi ugovori rutinski uključuju klauzulu koja zabranjuje studijima da digitalno manipuliraju njegovom izvedbom, odredba koja datira desetljećima unatrag od produkcije koja je umetnula virtualnu suzu na njegovo lice.

"Ono što je frustrirajuće u vezi s tim je da gubite svoju agenciju", rekao je Reeves o invazivnim praksama. “Kad igrate u filmu, znate da ćete biti montirani, ali vi sudjelujete u tome. Ako odete u deepfake zemlju, ona nema nijedno vaše gledište. To je zastrašujuće. Bit će zanimljivo vidjeti kako se ljudi nose s tim tehnologijama.”

Sljedeća tehnologija koja mijenja igre

Sljedeća napredna tehnologija, koja je već dostupna u beta verziji na Premiere Pro, je takozvano uređivanje temeljeno na tekstu, koje omogućuje osobi da uređuje video uređivanjem teksta dijaloga izdvojenog i transkribiranog iz videa putem umjetne inteligencije. AI također ističe važne zvučne zapise, može sastaviti početni sklop konačnog projekta i generirati pretraživanja temeljena na ključnim riječima za brzo pronalaženje određenih isječaka ili razgovora. Podaci izgrađeni za projekt postaju snažan novi način za učinkovito upravljanje svim tim snimkama.

"Hidrirate medije svim tim bogatim podacima", rekao je Keane.

Neke manje tvrtke već su pokrenule svoja razmišljanja o sličnim tehnologijama. Opis i podcast može stvoriti digitalnu verziju vašeg glasa, a zatim dati da čita skripte temeljene na tekstu, bez potrebe za dodatnim uređivanjem. Descript je također nedavno dodao tekstualno uređivanje za video, bilo da se radi o podcastovima ili drugom sadržaju.

Urednik Kendrick rekao je da je već koristio Adobeove alate za uređivanje teksta kako bi pomogao prijatelju da brzo okrene mini-dokumentarac sa sjedištem na Aljasci. Uređivanje temeljeno na tekstu vjerojatno će biti iznimno korisno za takozvane "preditore", producente/montažere koji se obično moraju probijati kroz dane snimke kako bi brzo sastavili emisije bez scenarija u tijesnim rokovima, rekao je Kendrick.

Audio knjige, skripte, društveni mediji dobivaju i AI

AI također ulazi u mnoge druge kutove zabave. JabukaAAPL
pokrenula paket AI alata dizajniranih za stvaranje naracije za audio knjige, stvarajući još jednu opciju za autore da stvaraju jeftine audio verzije svojih projekata "pripovijedanih digitalnim glasom temeljenim na ljudskom pripovjedaču". Vijest je izazvala glasne prigovore elitnog korpusa ljudskih pripovjedača audioknjiga i njihovih brojnih obožavatelja.

Svakako postoji razlog da cijenimo najbolja djela tih ljudskih pripovjedača i moglo bi proći mnogo vremena prije nego što se AI alat može približiti uvjerljivim glasovima i izvedbama najboljih ljudskih čitatelja najboljih knjiga.

Ali trošak korištenja tog talenta daleko je veći od financijskih troškova desetaka tisuća knjiga koje se izdaju svake godine. Tu bi Appleov paket alata mogao omogućiti pristup drugom tržištu za one sitne knjige, autore i izdavače koji pokušavaju dosegnuti prethodno udaljeno tržište već vrijedno procijenjenih 1.5 milijardi dolara širom svijeta.

Stavljanje u pogon Filmustage koristi AI za rastavljanje komponenti scenarija, uključujući elemente kao što su glumci, rekviziti, kostimi, korištena vozila, zvukovi, lokacije i više.

A što se tiče kratkih, kratkih video zapisa u poslu, TikTok, Meta's Reels i Alphabet's YouTube Shorts ovise o strojnom učenju i alatima umjetne inteligencije za posluživanje sljedećeg "preporučenog" videa za koji misle da ćete ga htjeti pogledati, i povezujući oglase s tim iskustvom na neprimjetan i privlačniji način.

Zvao je analitičar Rich Greenberg iz LightShed Partnersa prijelaz Facebooka na poboljšane preporuke sadržaja vođene umjetnom inteligencijom izuzetno skupe, ali "u konačnici bi to moglo dokazati (izvršni direktor Meta Mark) Zuckerbergov drugi najimpresivniji stožer (nakon mobilnih) na platformi koja se neprestano razvijala od svog početka."

Izvor: https://www.forbes.com/sites/dbloom/2023/02/24/how-ai-and-the-cloud-are-erasing-the-borders-in-making-movies-and-tv- emisije/