Na počátku roku společnost OpenAI ohromila technologickou komunitu a mnohé uživatele z oblasti médií a umění – a současně vyvolala nesouhlas tradičních videografů a umělců – když představila nový AI model nazvaný Sora. Tento model umožňuje tvorbu realistických videí vysokého rozlišení, hladkých a až do délky 60 sekund na klip.
Technologie zatím není veřejně dostupná – OpenAI v únoru 2024 oznámila, že Sora bude „k dispozici pro tzv. „červený tým“, který posoudí případné nedostatky a podrobí model rigoróznímu testování s cílem zajistit jeho správné fungování“. Model je pak dostupný pro vybrané uživatele – nejčastěji pro zkušené grafiky, designéry a filmaře. A právě tato vybraná skupina uživatelů s předběžným přístupem ukazuje nám všem ostatním, čeho všeho je model schopen.
Videoklip hotový za pár hodin?
Jeden z prvních uživatelů modelu Sora, scenárista a režisér Paul Trillo, který byl jedním z prvních na světě, kdo v březnu předvedl videa třetích stran vytvořená tímto modelem, vytvořil to, co je nazýváno „prvním oficiálním hudebním videoklipem vytvořeným s OpenAI Sora“.
Videoklip byl vytvořen pro indie chillwave hudebníka Washed Out (Ernest Weatherly Greene Jr.) a jeho nový singl „The Hardest Part.“ Jedná se v podstatě o čtyřminutovou sérii propojených, rychlých zoomových záběrů skrze různé scény, které byly všechny spojeny dohromady tak, aby vytvořily iluzi nepřetržitého zoomu.
Na svém účtu na sociální síti X, Trillo uvedl, že původní nápad na video měl již před deseti lety, ale nakonec ho opustil. Také odpověděl na otázky svých sledujících a uvedl, že video bylo vytvořeno z 55 samostatných klipů generovaných Sorou z celkového počtu 700. Veškeré klipy pak byly spojeny v Adobe Premiere.
First official commissioned music video made with @OpenAI Sora for @realwashedout
— Paul Trillo (@paultrillo) May 2, 2024
This was an idea I had almost 10 years ago and then abandoned. Finally was able to bring it to life.
Watch the full video here https://t.co/sGpmMLVCul pic.twitter.com/J3RxRD9nzo
Sora jako součást Adobe Premiere
Adobe nedávno oznámilo, že hledá způsoby, jak začlenit Sora a další modely generování videa třetích stran do svého předplatného softwaru Premiere Pro. Prozatím ale není stanovený časový plán pro tuto integraci. Mezitím ti, kteří chtějí napodobit workflow Trilla, musí generovat AI video klipy v jiném softwaru třetích stran, jako je Runway nebo Pika (protože Sora zůstává nepřístupná veřejnosti), a pak je ukládat a importovat do Premiere. Samozřejmě to není ideální, ale zatím to je nejlepší dostupné řešení, které máme.
V rozhovoru pro Los Angeles Times, Washed Out/Greene uvedl: „Těším se, až budu moci začlenit některé z těchto zcela nových technologií a uvidím, jak to ovlivní moje tvůrčí procesy. Pokud jde o průkopnictví, rád bych byl jeho součástí.“
„Greene musel napsat příkazy s dostatečnými detaily nejen o samotném obrazu, ale i o úhlech záběrů a pohybech postav. ‚Prolétáváme bublinou, ta praská a my prolétáváme skrz žvýkačku a vstupujeme na otevřené fotbalové hřiště,‘ napsal Trillo jako část svého příkazu pro jeden krátký úsek videa. ‚Scéna se rychle pohybuje, ukazuje pohled zepředu, ukazuje, jak se studenti zvětšují a zrychlují.‘
Trillo také uvedl, že použil pouze schopnosti modelu převádět text na video, na rozdíl od použití stávajících snímků nebo obrázků z jiných zdrojů, které by byly následně animovány pomocí AI – běžná taktika mezi umělci ve rychle se vyvíjející scéně AI videa.
Kreativitě se meze nekladou
Tento příklad ukazuje sílu Sory ve tvorbě médií s AI a je užitečným příspěvkem k nedávno zveřejněným informacím, že další z prvních demo videí od kanadského kreativního studia Shy Kids s názvem „Air Head,“ zobrazující muže s hlavou jako balónek, ve skutečnosti velmi záviselo na dalších nástrojích pro vizuální efekty a úpravu videa, jako je rotoskopie v Adobe After Effects.
To je ale samozřejmě velmi náročné a nákladné, a tak mnohé brilantní myšlenky tvůrců zůstávají pouze v jejich hlavách. Sora by mohla být skvělý klíč pro vyřešení tohoto problému, kdy prakticky kdokoli, kdo má dobré nápady a kreativní mysl by mohl své unikátní myšlenky přenést rovnou do reality. Díky malým nákladům a nízkému stupni technologické zdatnosti by mohlo dojít k výraznému podpoření „skrytých umělců“.
Ne všichni s tím ale souhlasí. Nemálo tvůrců kritizuje OpenAI za to, že je vykořisťující a porušuje autorská práva lidských umělců tím, že shromažďuje a trénuje své modely na jejich dřívějších dílech bez informovaného souhlasu nebo kompenzace.
Shrnutí:
- OpenAI představila model umělé inteligence Sora, který umožňuje tvorbu realistických videí ve vysokém rozlišení s délkou až 60 sekund.
- Paul Trillo, jeden z prvních uživatelů Sory, vytvořil první oficiální hudební videoklip pro hudebníka Washed Out s názvem „The Hardest Part“.
- Videoklip se skládá z 55 spojených klipů, generovaných z celkového počtu 700 klipů vytvořených pomocí Sora.
- Adobe plánuje začlenit Sora a další modely generování videa třetích stran do svého softwaru Premiere Pro, ale zatím není stanoven časový plán integrace.
Zdroj:
- The first music video generated with OpenAI’s unreleased Sora model is here. (n.d.). https://venturebeat.com/ai/the-first-music-video-generated-with-openais-unreleased-sora-model-is-here/
