Hogyan törli el a mesterséges intelligencia és a felhő a határokat a film- és tévékészítés során

Ha úgy tűnik, hogy a mesterséges intelligenciáról és a felhőalapú számítástechnikáról szóló beszélgetések manapság mindenhol zajlanak, nem csak a ritka technológiai és befektetői körökben, ez igaz. És ez sehol sem igazabb, mint a szórakoztatóiparban, ahol a kreatív és üzleti osztályok egyaránt aggódnak amiatt, hogy milyen következményekkel járhat az általuk évek óta csiszolt mesterség, és izgat a technológia demokratizáló ereje.

A közelmúltban a Sundance Filmfesztiválon számos rendezővel, vágóval és másokkal beszélgettem, akik az új mesterséges intelligencia és felhő-kamerás képességeket használták, átalakítva a film- és TV-gyártási folyamatot, valamint az Adobe vezetőivel, amely a széles körben használt vágószoftvert Premiere Pro és egyéb eszközök a kreativitás elősegítésére.

Ez egy figyelemre méltó időszak, gyorsan fejlődik, lélegzetelállító jóslatokkal pozitív és negatív egyaránt, de néhány nagyszerű lehetőség is van arra, hogy a film és a tévé (nevezzük csak videó alapú) módozatát több mint egy évszázada újra elkészítsék.

Az ipar ölelése még csak most kezdődött. ComcastCMCSA
például most kapta meg technikai Emmy, amiért mesterséges intelligenciát használ a sportvideók gyors kiemeléséhez.

A sztárok és képviselőik is észreveszik, ahogy a mesterséges intelligencia technológiák az iparág speciális szegleteiben is felbukkannak.

Például tehetségügynökség A CAA stratégiai partnerséget írt alá a Metaphysic-kel, amely „de-aging” eszközöket biztosít Itt, egy képregényen alapuló Miramax funkció. A sztárok, Tom Hanks és Robin Wright egyetlen szobában alakítják majd a karaktereket, ahogy éveken át öregszenek, fiatal koruktól kezdve.

Egy ügynökség számára nyilvánvaló az ilyen technológia vonzereje: legnagyobb sztárjaik/ügyfeleik hirtelen több szerepben, még évtizedekig életképesek.

Az új technológia fellendülési lehetőségei

Napról napra azonban lehetőség nyílik a szerkesztők, rendezők és más, az összetett feladatban résztvevők számára egy videó alapú projekt létrehozására. Azokkal a kezdő szerzőkkel folytatott beszélgetések során, akiknek indie és dokumentumfilmes projektjei kitöltik a Sundance ütemtervét, egyértelmű, hogy a Premiere Pro-t egy nagy sebességű együttműködési platformnak tekintik, amely a lehetséges kreatív felhasználások egyre szélesebb körét teszi lehetővé a lehetséges alkotók egyre szélesebb köre számára.

Az AdobeADBE
Meagan Keane, a professzionális videók termékmarketing-igazgatója az AI-nak „a lehetőségek hatalmas ajtónyitójának nevezte, ha a filmgyártás jövőjére gondolunk. Úgy gondoljuk, hogy a jövő mindenkié.”

Ez azt jelenti, hogy a mesterséges intelligencia hogyan növelheti az emberi kreativitást, nem pedig helyettesítheti azt, ahogy egyesek félnek. A mesterséges intelligencia által vezérelt eszközök lehetővé tehetik a szerény vagy egyáltalán nem technikai tudással, erőforrásokkal vagy kapcsolatokkal rendelkező alkotókat vonzó videó- ​​és egyéb médiás projektekhez. A professzionális alkotók számára a mesterséges intelligencia még most is csökkenti az ismétlődő feladatok, például egy adott jelenet felvételeinek átgázolását, lehetővé téve a szerkesztők és más alkotók számára, hogy a (szó szerint) nagyobb képre összpontosítsanak.

De ez még ennél is nagyobb – mondta Michael Cioni, az Adobe globális innovációs igazgatója, aki az Adobe tulajdonában lévő Frame.io-val a kamera-felhő technológia hosszú távú bajnoka.

Minden digitális eszköz Felhőalapú eszköz is

Egyszerűen fogalmaz: „2031-re minden elektronikus eszköz, amely a médiában és a szórakoztatásban keletkezik, a felhőben, a felhő által generálódik. Az az igazság. Ezt technológiai bizonyosságnak nevezem, hogy minden elektronikus eszköz, amelyet egy eszköz generál, a felhőben generálódik”, nem pedig mondjuk helyi merevlemezen, celluloidon, videokazettán vagy memóriakártyán.

A médiaátalakítás egy jól ismert ciklusában a szöveges dokumentumok voltak az elsők, amelyek a felhőbe (és az AI-ba) kerültek. Most már rutinszerűen létrehozzák, megosztják és átalakítják felhőalapú szolgáltatásokban, mint például a Google Docs, az Apple Pages, a Microsoft Word és az Adobe Acrobat. Emberek százmilliói hallgatnak (és készítenek, dolgoznak együtt és értékesítenek) zenét a felhőben a Spotify, az Apple Music, az Amazon Music, a Tidal és másoknak köszönhetően. Most megváltoztatja az általunk létrehozott legösszetettebb médiát.

– Tegyük fel, hogy egy filmjelenetet csinál – mondta Cioni. „Egy jelenet felvétele után ténylegesen be tudja írni a nyelvet: „Ess az eső”. És megjelenik a víz a felvételen, elkezd esni az eső. „Csinálj havat”, és megjelenik a felvételen. És ehhez nem kell mérnöknek lenni. Ez valóban sci-finek tűnik, de teljesen megvalósítható lesz. Látjuk, hogy ez az állókép (fotók) nagyon korai szakaszában megtörténik, és tudjuk, hogy ez videóvá válik. És ez egy nagyon fontos tulajdonsága annak, hogy el kell gondolkodnunk azon, hogy ez hogyan hat a kreatív emberekre.”

Ez rengeteg hatással van a mozgóképkészítés jövőjére. Ahogy Leonard Cohen már régen megfogalmazta, amikor költőből regényíróvá és énekessé/dalszerzővé vált harmincas éveiben, „a határok sok törekvés között elhalványultak”.

Sok fiatal filmes rutinszerűen átlépi ezeket a határokat, mindent megtesznek projektjeik elkészítésében, és rutinszerűen együttműködnek digitális platformokon. Felhőből kamerába szállítással és mesterséges intelligens intelligens eszközökkel jelenetet forgathatnak, gyorsan létrehozhatnak egy durva „összeállítást” a szerkesztés kiindulópontjaként, miközben megállapítják, hogy van-e elég a jelenet „működéséhez”, vagy további filmezésre van szükség. .

Az alapvető vizuális effektusokat, a színkorrekciót és a hangtervezést is elnagyolhatják, mielőtt finomhangolásra szakemberekhez adnák. Mint ilyen, a Premiere több volt, mint egy hagyományos, nem lineáris videószerkesztő program sok Sundance-alkotó számára.

Új kapcsolat kiépítése az emberek és a képek között

„Ez az egyik legnagyobb szenvedélyünk: az emberek és a kamerák közötti kapcsolat, és ennek a társadalomra gyakorolt ​​hatása” – mondta Maximilien Van Aertryck, a provokatív dokumentumfilm társrendezője (és társszerkesztője). Fantasztikus gép, Amely elnyerte a Sundance zsűri különdíját kreatív látásmódért. „Olyanok vagyunk, mint az antropológusok, akik szeretnek szórakozni.”

Dokumentumfilmjük finoman megfontolt megközelítésre szólít fel a világhoz, amelyet ezekkel az új eszközökkel hozunk létre. A régi politikai vicc szerint „kinek fogsz hinni: nekem vagy a hazug szemednek?” Egyre inkább meg kell értenünk, amikor a szemünk faliórái A hazugságot és a mozgóképeket hinni kell – mondta Aertryck társrendezője/-szerkesztője, Axel Danielson.

„A filmnek nincs sok válasza” – mondta Danielson. "Kérdések vannak benne. Az egyetlen válasz, amit tudunk, az az, hogy nekünk, társadalmaknak együttesen nagyon komolyan kell vennünk a médiaműveltséget.”

A projekt több mint egy évszázadnyi mozgóképet gyűjt össze, olyan úttörőkig visszanyúlva, mint Georges Melies (akinek királyi alanya felkiáltott volna, mi lett a film neve). Útközben megáll egy idegesítően lelkes Leni Riefenstahlnál, aki egy nürnbergi náci tüntetésről készült kedvenc felvételeit játsza le, és egy ISIS-harcos ismételten elrontja a vonalait egy terrorista toborzási videóból készült blooper tekercsben. Sokkal szelídebb darabokat is tartalmaz, de a lényeg az, hogy a nagyszerű és szörnyű alkotók sokféleképpen hasznosítják az új eszközöket.

On Fantasztikus gép, Van Aertryck és Danielson éveket töltött azzal, hogy jellegzetes klipeket gyűjtsenek az emberek/kamerák és az általuk létrehozott képek bonyolult kapcsolatáról. Miután elérkezett az ideje a film összeállításának, távolról dolgoztak Mikel Cee Karlsson vágóval és Ruben Ostlund ügyvezető producerrel, a kétszeres Oscar-díjra jelölt író-rendezővel (Szomorúság háromszöge), amelynek a Plattform Produktion készítette a filmet.

„Nem vagyunk képzett szerkesztők; azért tesszük, mert ezt kell tennünk” – mondta Van Aertryck. „Az Adobe tökéletes eszközzé válik számunkra, mert mindent beledobhatunk, és oda-vissza megoszthatjuk.”

Van Aertryck szerint a négyen a Premiere felhőalapú eszközeivel kereskedtek klipekkel és képsorokkal, mintha egy asztal körül ülnének, annak ellenére, hogy Nyugat-Európában a Balti-tengertől (Göteborg, Svédország) a Baleár-szigetekig (Mallorca) terjedtek el. Ez egy különösen távoli példája annak a szabadságnak, amelyet az alkotóknak biztosít, hogy bárhonnan érkezzenek, és szinte bárhol dolgozzanak, ha kell vagy akarnak.

„Az online megosztás sokkal többet tesz lehetővé” – mondta Crystal Kayiza, író-rendező Pihenő, amely elnyerte a Sundance zsűri díját az amerikai rövidfilmes fikcióért. "Ha vissza akarok menni Oklahomába, megtehetem, ha rövidfilmet készítek."

Tavaly az Adobe bejelentette, hogy néhány népszerű kamerában és más gyártási eszközben új, közvetlenül a felhőbe átviteli képességeket kínál, amelyek egyidejűleg továbbítják a videót rögzítés közben. Ez lehetővé teszi a szerkesztők, producerek, vezetők és más utómunkálati szakemberek számára, hogy néhány perccel a felvétel után megkezdjék a munkát a felvételen.

Még a kis produkciók is alkalmazzák a technológiákat. A felhőkapcsolatok elengedhetetlenek voltak, különösen a létrehozás korai szakaszában Megyek a Mariachi-i egyetemre, mondta Daniela T. Quiroz, aki Sundance szerkesztési díjat nyert.

Alejandra Vasquez és Sam Osborn rendezők még a texasi Rio Grande Valley középiskolai táncversenyeiről szóló dokumentumfilmet forgatták, amikor a brooklyni székhelyű Quiroz elkezdte összeállítani a projektet. A már rögzített anyagok korai és friss képe segített a későbbi forgatás és a fókuszterületek kialakításában.

„Szerkesztőkként abban az egyedülálló kiváltságban részesülünk, hogy először láthatjuk ezeket az embereket a kamera előtt” – mondta Quiroz. "Igazán látni fogod, hogy kibe vagy beleszeretve, és milyen zenébe szeretsz bele."

A néhány évvel ezelőtti „régi időkhöz” hasonló, azonnal elérhető digitális napilapok nélkülözése elengedhetetlen volt a fotózásban. Néha arra gondolok, hogy meghalok Oregon partjának távoli részén. Ehelyett a napi felvételeket merevlemezekre töltötték, majd egyik napról a másikra New Orleansba szállították, hogy bekerüljenek a digitális közvetítőkbe. Ez emlékeztetett a technológia által hozott fejlesztésekre – mondta Ryan Kendrick szerkesztő.

Egy újfajta együttműködés

Ez lehetővé tette a nashville-i Kendrick számára, hogy elkezdje a szerkesztést, együttműködve Rachel Lambert rendezővel és másokkal több államban.

„Milyen klassz, hogy azzal dolgozhatok, akivel akarok dolgozni, és nem vagyunk ugyanahhoz a helyhez kötve” – mondta Kendrick. Ezenkívül megváltoztatja a dinamikát a rendezők, operatőrök, vágók és a produkció többi része között.

„Mindig is elszigetelve érezted magad a díszletektől” – mondta Kendrick. „Most úgy érzed, jobban kapcsolódsz hozzá. Nem érzi magát annyira elválasztva attól a hangnemtől, amit adnak. A szerkesztőszoba egy igazán nagyszerű hely, ahol rengeteg hibát követhet el, és az ellenkezőjét teszi annak, amit szeretne. Mindig azt mondom: 'Nem tudom. Találjuk ki.'”

On Néha úgy érzem, hogy meghalok, Kendrick, Lambert és Dustin Lane fényképészeti igazgató jóval a forgatás tényleges megkezdése előtt hetente beszélgetni kezdett, hogy korán elhárítsa a lehetséges problémákat.

„Beszélnénk az esetlegesen felmerülő szerkesztési problémákról” – mondta Kendrick. „Amikor megkapod a forgatókönyvet, a legnehezebb azon gondolkodni, hogy a film hogyan fog átállni a következő részre. Konkrétan a filmben (a főszereplők) moziba mennek. Sokat beszélgettünk arról, hogyan fogjuk elérni azokat a képeket, amelyekre szükségünk van az érzelmi súly megtartásához.”

A Camera-to-Cloud által elérhető gyors fordulatok különösen hasznosak rövid projekteknél, például reklámoknál és zenei videóknál, mondta Kendrick.

„A reklámok bizonyos fordulatai vad” – mondta Kendrick. A Premiere Pro, Frame.io és After Effects projektek oda-vissza továbbítása valóban csak felhőalapú architektúrával volt megvalósítható.

„Ez a legnagyobb (a termelési munkafolyamatok késése), amit az elmúlt öt évben sikerült kiküszöbölni” – mondta Kendrick.

A jobb technológia kiépítésének vezérelvei

Az Adobe technológiáival kapcsolatos megközelítése öt „irányelv” köré épül: munkafolyamat, média, együttműködés, termelékenység és biztonság – mondta Keane.

„Az AI-t valóban a „termelékenységbe” helyezzük” – mondta Keane. „Nem a kreatívok lecseréléséről van szó. Arról van szó, hogy felváltsa a hétköznapokat.”

A hollywoodi szakszervezetek szorosan figyelik a gyorsan változó AI-teret. Puck arról számolt be, hogy a legnagyobb hollywoodi szakszervezet, a SAG-AFTRA igazgatótanácsa azt tervezi, hogy a közelgő szerződési alkukba belefoglalja a hasonlatossági jogok kérdését – a mesterséges intelligencia felhasználásával tagjai kinézetének, hangjának vagy egyéb aspektusainak újraalkotására.

Egyelőre a tehetségek ügyvédei azt tanácsolták, hogy „a szerződésben szereplő minden olyan nyelvezet, amely a színészi előadások szimulálásához való jogot szabályozza, „érvénytelen és végrehajthatatlan mindaddig, amíg a feltételeket meg nem tárgyalták a szakszervezettel”” – számolt be Puck. .

A bonyolult új kérdés komoly szerződéskötési tárgyalásokat eredményezhet idén tavasszal. A karrierlehetőségeiket bővíteni kívánó fiatalabb és középkorú előadók alkalmazhatják a technológia bizonyos felhasználási lehetőségeit, de erős szerződésvédelem nélkül egyes üzletek a technológiát arra használhatják, hogy ne fizessenek olyan digitális előadásokért, amelyek technikailag nem a szereplők.

Egy durva példát annak, ami végül bekövetkezhet, hetekig lehetett találni a Twitchen, ahol a „watchmeforever” egy végtelen, AI által generált „epizódja”. Seinfeld. A „műsor” rosszul ragozott, számítógéppel generált hangokat, egyszerű grafikát és nem különösebben vicces vicceket tartalmazott. A műsor azt is sugallja, mi lehet végül lehetséges sokkal magasabb minőségi szinten. Érdemes megjegyezni, hogy a végtelen ciklus megszakadt egy leállási értesítéssel, amikor a „Jerry” karakter stand-up rutinja átváltott a transz-ellenes rutinba.

A világ megnyitása a kreatív törekvések előtt

Sokkal pozitívabb, hogy az Adobe Keane rámutat az AI és a felhő által biztosított kreatív eszközök sokkal szélesebb körű elérésére. Kiküszöböli annak szükségességét, hogy a nagy renderelő farmok feldolgozási képeket és hangokat, effektusokat és egyebeket generáljanak, miközben továbbra is biztosítja azt a számítási teljesítményt és biztonságot, amelyre egy közepesen ambiciózus videóprojektnek szüksége van.

„Ha központosítani tudja a felhőt, megnyílik a lehetőség, hogy a világ minden tájáról érkezzenek történetek” – mondta Keane. „Az együttműködésnek minden szakaszban meg kell jelennie. A közös perspektíva vagy megerősíti elképzeléseit, vagy további kihívásokat jelent."

Példaként a biztonság fontosságára a filmesek számára – mutatott rá Keane C terv, Sundance dokumentumfilm az abortuszról. Alkotóinak többször el kellett homályosítaniuk néhány kamerás interjú arcát és hangját, és vaskalapos biztonságot kellett biztosítaniuk az elmosódott eredeti média számára is.

A generatív mesterséges intelligencia, a mély hamisítványok és a kapcsolódó problémák robbanása azt is jelenti, hogy a hitelesség minden eddiginél fontosabb, mondta Keane. Az Adobe a Content Authenticity Initiative tagja, más média- és technológiai cégek mellett, mint például a New York Times.NYT
és a Canon.

Keanu Reeves, az ikonikus sci-fi franchise sztárja A Mátrix, kevésbé szangvinikus. Nemrég azt mondta a Wirednek, hogy az AI által támogatott videó rosszindulatú felhasználása, létrehozása deepfakes, „ijesztő”. Reeves szerződései rendszeresen tartalmaznak egy záradékot, amely megtiltja a stúdióknak, hogy digitálisan manipulálják az előadását. Ez a rendelkezés évtizedekre nyúlik vissza egy olyan produkcióig, amely virtuális könnycseppet szúrt az arcára.

„Ebben az a frusztráló, hogy elveszíti az ügynökségét” – mondta Reeves az invazív gyakorlatokról. „Amikor előadást tartasz egy filmben, tudod, hogy szerkeszteni fogják, de részt veszel ebben. Ha bemész a mélyhamisított földre, annak nincs semmilyen nézőpontja. Ez félelmetes. Érdekes lesz látni, hogyan bánnak az emberek ezekkel a technológiákkal.”

A következő játékmódosító technológia

A Premiere Pro-n már béta verzióban elérhető következő éleket nyomó technológia az úgynevezett szöveg alapú szerkesztés, amely lehetővé teszi a videó szerkesztését a videóból mesterséges intelligencia által kinyert és átírt párbeszédek szövegének szerkesztésével. Az AI emellett kiemeli a fontos hangokat, összeállíthatja a végső projekt kezdeti összeállítását, és kulcsszóalapú kereséseket generálhat, hogy gyorsan megtalálja az adott klipeket vagy beszélgetéseket. A projekthez épített adatok új, hatékony módszerré válnak a felvételek hatékony kezeléséhez.

– Ön hidratálja a médiát ezzel a rengeteg adattal – mondta Keane.

Néhány kisebb cég már bevezette a hasonló technológiákat. Leírás és podcast létrehozhatja hangjának digitális változatát, majd szövegalapú szkripteket olvashat el anélkül, hogy további szerkesztésre lenne szüksége. A Descript nemrégiben szövegalapú szerkesztést is bevezetett a videókhoz, legyen szó podcastokról vagy más tartalomról.

Kendrick szerkesztő elmondta, hogy már használta az Adobe szövegalapú szerkesztő eszközeit, hogy segítsen egy barátjának gyorsan megfordítani az alaszkai székhelyű mini dokumentumfilmet. A szövegalapú szerkesztés valószínűleg rendkívül hasznos az úgynevezett „preeditorok” számára is, akiknek általában napokig tartó felvételeken kell átgázolniuk, hogy gyorsan összeállíthassák a szkript nélküli műsorokat szűkös idővonalon – mondta Kendrick.

Hangoskönyvek, forgatókönyvek, közösségi média, mesterséges intelligencia is

A mesterséges intelligencia a szórakozás sok más területére is kiterjed. almaAAPL
indított AI-eszközkészlet, amelyet hangoskönyvek narrációjának létrehozására terveztek, újabb lehetőséget teremtve a szerzők számára, hogy alacsony költségű audioverziókat készítsenek projektjeikből „digitális hangon, emberi narrátor alapján”. A hír hangos kifogásokat váltott ki a hangoskönyv-elbeszélők elit csapatából és bőséges rajongóikból.

Minden bizonnyal van okuk kincsként értékelni ezen emberi narrátorok legjobb munkáit, és hosszú időbe telhet, amíg egy AI-eszköz közel kerülhet a legjobb könyvek legjobb emberi olvasóinak lenyűgöző hangjához és teljesítményéhez.

De ennek a tehetségnek a felhasználásának költsége messze meghaladja az évente megjelenő könyvek tízezreit. Ez az a hely, ahol az Apple eszközkészlete hozzáférést biztosíthat egy másik piachoz azoknak a kis idejű könyveknek, szerzőknek és kiadóknak, akik egy korábban távoli piacra próbálnak eljutni, amelynek értéke már világszerte 1.5 milliárd dollárt ér.

Indítás Filmszínház A mesterséges intelligencia segítségével lebontja a forgatókönyv-összetevőket, beleértve az olyan elemeket, mint a szereplők, kellékek, jelmezek, használt járművek, hangok, helyszínek és egyebek.

És ami a vállalkozás rövid, rövid videós oldalát illeti, a TikTok, a Meta's Reels és az Alphabet's YouTube Shorts mind a gépi tanulástól és az AI-eszközöktől függ, hogy a következő „ajánlott” videót szolgálják ki, amelyet szerintük meg akar majd nézni, és a hirdetések zökkenőmentesebb és vonzóbb módon történő összekapcsolása ezzel a tapasztalattal.

Rich Greenberg, a LightShed Partners elemzője telefonált a Facebook áttérés a továbbfejlesztett AI-vezérelt tartalomajánlások felé rendkívül drága, de „végső soron bebizonyíthatja (a Meta vezérigazgatója, Mark) Zuckerberg második leglenyűgözőbb forgópontját (a mobil után) egy platformon, amely a kezdetek óta folyamatosan fejlődik.”