Tehisintellekt
Adobe ütleb, et ehitab videote loomiseks tehisintellekti mudelit. Kuid see ei paljasta, millal see mudel täpselt välja tuleb, ega palju sellest, vaid lihtsalt "fakt", et see on olemas.
Adobe'i mudel, mis on osa ettevõtte kasvavast generatiivsete tehisintellekti toodete perekonnast Firefly, pakub omamoodi vastusena OpenAI Sorale, Google'i Image 2-le ja üha kasvava arvu idufirmade mudelitele tekkivas generatiivses tehisintellekti videoruumis. Adobe ütleb, et see jõuab Premiere Pro-sse, Adobe lipulaevasse videotöötluskomplekti, ja jõuab selle aasta lõpus.
Nagu paljud tänapäevased generatiivsed AI-videotööriistad, loob Adobe mudel pilte nullist (kas sõnum või viitekujutised) ja kasutab Premiere Pro kolme uut funktsiooni: objektide lisamine, objektide eemaldamine ja generatiivne laiendus.
Need funktsioonid on iseenesestmõistetavad.
Objektide lisamine võimaldab kasutajatel valida videoklipi segmendi (näiteks ülemise kolmandiku või vasakpoolse alanurga) ja sisestada sõnumi sellesse segmenti objektide lisamiseks. Adobe'i pressiesindaja näitas briifingul pilti reaalsest portfellist, mis oli täis Adobe mudeli loodud teemante.
pilt: Teemandid, mille on loonud AI, Adobe.
Objektide eemaldamine eemaldab videotest elemendid, näiteks mikrofonid pikendusel või postil või kohvitassid video taustal.
Objektide eemaldamine AI-ga. On näha, et tulemused ei ole täiesti täiuslikud. pilt: Adobe
Mis puutub generatiivsesse laiendisse, siis see lisab mõne kaadri klipi algusesse või lõppu (kahjuks Adobe ei öelnud, mitu kaadrit). Generatiivne laiendus ei ole mõeldud tervete stseenide loomiseks, vaid pigem vahekaadrite lisamiseks heliribaga sünkroonimiseks või võtte säilitamiseks, et anda sellele täiendav rütm, näiteks emotsionaalse tooni lisamiseks.
pilt: Adobe
Hirmu leevendamiseks deepfakes mis paratamatult tekib selliste generatiivsete AI-tööriistade juures nagu need, lisab Adobe sõnul Premiere'i sisumandaadid (metaandmed tehisintellekti loodud meediumide tuvastamiseks). Sisu mandaadid, meedia päritolustandard, mida Adobe toetab oma sisu autentsuse algatuse kaudu, olid juba Photoshopis ja need olid Adobe Firefly pildimudelite komponent. Premiere'is näitavad need mitte ainult seda, millist sisu AI genereeris, vaid ka seda, millist AI mudelit selle genereerimiseks kasutati.
Küsisin Adobe'ilt, milliseid andmeid (pildid, videod jne) mudeli koolitamiseks kasutati. Ettevõte ei öelnud, kas ja kuidas (või kas) ta hüvitab andmekogusse panustajatele.
Eelmisel nädalal avaldas Bloomberg, viidates asjaga kursis olevatele allikatele, teavitatud et Adobe maksab fotograafidele ja kunstnikele oma aktsiameedia platvormil Adobe Stock kuni 120 dollarit lühikeste videoklippide esitamise eest, et koolitada oma video genereerimise mudelit. Väidetavalt ulatub tasu olenevalt esitlusest umbes 2,62 dollarist videominuti kohta kuni 7,25 dollarini minutis, kusjuures kõrgema kvaliteediga pildid nõuavad vastavalt kõrgemat hinda.
See oleks kõrvalekalle Adobe praegusest lepingust Adobe Stocki kunstnike ja fotograafidega, kelle tööd ta kasutab oma pildi loomise mudelite koolitamiseks. Ettevõte maksab neile panustajatele iga-aastast boonust, mitte ühekordset tasu, olenevalt nende laos oleva sisu mahust ja selle kasutamisest, kuigi see on boonus, mille valem on läbipaistmatu ja seda ei garanteerita aastast aastasse.
Bloombergi aruanded, kui need on täpsed, näitavad lähenemist, mis on teravas kontrastis generatiivsete tehisintellekti videokonkurentide, nagu OpenAI, lähenemisviisiga, mis on korduvalt on öeldud mis on mudelite koolitamiseks ammutanud andmeid avalikult kättesaadavatelt veebisaitidelt, sealhulgas YouTube'i videotest. YouTube'i tegevjuht Neal Mohan ütles hiljuti, et YouTube'i videote kasutamine OpenAI tekstist videoks generaatori koolitamiseks oleks platvormi teenusetingimuste rikkumine, rõhutades YouTube'i OpenAI jt õiguslikku nõrkust.
Ettevõtted, sealhulgas OpenAI, on kaevatakse kohtusse väidete üle, et nad rikuvad autoriõiguse seadust, koolitades oma tehisintellekti autoriõigustega kaitstud sisu alal, ilma krediiti andmata või omanikele maksmata. Adobe näib olevat kavatsus seda asjaolu vältida, nagu tema mõnikord tehisintellekti loov konkurents, Shutterstock ja Getty Images (millel on ka kokkulepped mudelite koolitusandmete litsentsimiseks) ning oma intellektuaalomandi hüvitamise poliitikaga positsioneerida end kontrollitavalt "turvalise" valikuna. ettevõtete klientidele.
Maksmise osas ei ütle Adobe, kui palju maksab klientidele Premiere'i tulevaste videorenderdusfunktsioonide kasutamine; Hindade üle arvatavasti veel arutatakse, aga firma paljastatud et makseskeem järgib oma esimeste Firefly mudelitega loodud generatiivset krediidisüsteemi.
Tasulise Adobe Creative Cloudi tellimusega klientidele uuendatakse generatiivseid krediite iga kuu, eraldades olenevalt plaanist 25–1000 kuus. Keerulisemad töökoormused (näiteks suurema eraldusvõimega või mitme pildi genereerimisega loodud pildid) nõuavad reeglina rohkem krediiti.
Esitatakse suur küsimus: kas Adobe AI-toega videofunktsioonid on tõesti erineva väärtusega panused selle maksumuse järgi?
Firefly pildistamismudelid on seni olnud laialdaselt naeruvääristatud sama pettumust valmistav ja vigane võrreldes Midjourney, OpenAI DALL-E 3 ja teiste konkureerivate tööriistadega. Väljalaske ajakava puudumine videomudelil ei sisenda erilist kindlustunnet, et sama saatust õnnestub vältida. Seda ei tee ka asjaolu, et Adobe keeldus näitamast reaalajas esitlusi objektide lisamise ja eemaldamise ning generatiivse laienduse kohta, nõudes selle asemel eelsalvestatud videot.
Võib-olla oma panuste maandamiseks ütleb Adobe, et ta peab läbirääkimisi kolmandate osapoolte müüjatega oma videogeneratsiooni mudelite Premiere'i integreerimise üle, aga ka selliste tööriistade üle nagu generatiivne laiendus ja palju muud.
Üks neist pakkujatest on OpenAI.
Adobe ütleb, et teeb koostööd OpenAI-ga, et leida viise Sora lisamiseks Premiere'i töövoogu. Partnerlus OpenAI-ga on AI käivitamisvõimalusi arvestades mõistlik oma ettepanekutes Hollywoodile hiljuti, on kõnekas, et OpenAI tehnoloogiajuht Mira Murati osaleb sel aastal Cannes'i filmifestivalil. Teiste varasemate partnerite hulka kuuluvad idufirma Pika, mis loob AI tööriistu videote genereerimiseks ja redigeerimiseks, ja Runway, mis oli turul üks esimesi generatiivse videomudeli pakkujaid. .
Adobe pressiesindaja ütles, et ettevõte on tulevikus avatud koostööks teistega.
Nüüd, et olla väga selge, on need integratsioonid praegu pigem mõtteeksperiment kui töötav toode. Adobe on korduvalt rõhutanud, et need on pigem "varajases eelvaates" ja "uuringutes", mitte midagi, millega kliendid võivad lähiajal mängida.
Ja see on Adobe generatiivse videotoote üldine toon.
Adobe püüab nende reklaamidega selgelt märku anda, et mõtleb generatiivsele videole, kasvõi esialgses mõttes. Oleks rumal seda mitte teha: generatiivses tehisintellekti võidujooksus ettevalmistamata vahelejäämine tähendab riski kaotada väärtuslikku uut potentsiaalset tuluvoogu, eeldades, et majandus läheb lõpuks Adobe kasuks. AI mudelite koolitamine, käitamine ja levitamine on ju kallis.
Kuid ausalt öeldes pole selles näidatud kontseptsioonid kuigi veenvad. Kuna Sora on laiemalt ja kindlasti on tulemas rohkem uuendusi, on ettevõttel palju tõestada.
