Transformă o poveste într-o benzi desenate cu Lore Machine

În urmă cu 12 ani, autorul Will Douglas Heaven, în timpul său liber, a scris o nuvelă plină de umor despre un bărbat pasionat pentru mâncarea de lux pentru pisici. Și acum, există o platformă AI generativă numită Lore Machine - care a ajutat la transformarea acestei povești interesante într-o benzi desenate.

Autorul își pune povestea în caseta de text și primește un mesaj: „ Identificăm scene, locații, personaje și emoții. Acest lucru poate dura până la 2 minute .” Lore Machine a analizat textul, a extras descrieri ale oamenilor și locurilor menționate și apoi a transmis acele informații unui model generator de imagini.

Pe ecran apare un storyboard ilustrat. Pe măsură ce autorul face clic pe ilustrațiile comice vii ale personajelor sale aproape uitate, lucrurile iau o întorsătură surprinzătoare.

După mai bine de un an de dezvoltare, Lore Machine și-a făcut acum debutul public. Pentru 10 USD/lună, puteți încărca până la 100.000 de cuvinte (până la 30.000 de cuvinte pe încărcare) și puteți crea 80 de imagini pentru povestiri scurte, scenarii, transcrieri podcast și multe altele. Există, de asemenea, niveluri pentru utilizatorii puternici, inclusiv un plan de întreprindere de 160 USD/lună cu 2,24 milioane de cuvinte și 1.792 de imagini. Ilustrațiile vin într-o varietate de stiluri încorporate, de la manga la acuarelă până la emisiunile TV din anii '80.

Zac Ryder – fondatorul agenției de creație Modern Arts – a folosit o versiune cu acces anticipat a instrumentului de când fondatorul Lore Machine, Thobey Campion, i-a arătat pentru prima dată lui Ryder ce poate face. Ryder a trimis un scenariu de scurtmetraj către sistem, iar Lore Machine l-a transformat peste noapte într-un roman comic de 16 pagini.

"Îmi amintesc că Thobey și-a împărtășit ecranul. Eram cu toții complet uimiți", a spus Ryder. „Nu este vorba doar de aspectul vizual, ci și de povestire: de la povestea până la emoțiile personajelor, totul a fost perfect de la început.”

Modern Arts folosește în prezent Lore Machine pentru a dezvolta un univers fictiv pentru o serie de benzi desenate — o lucrare bazată pe un scenariu scris de creatorul filmului Netflix Love, Death & Robots .

Lore Machine este realizată din componente familiare:

• Un model de limbă mare (LLM) scanează textul dvs., identificând descrieri ale persoanelor, locurilor, precum și sentimentele generale.
• O versiune Stable Diffusion va genera imaginea.

Cu toate acestea, ceea ce face ca Lore Machine să fie diferită este cât de ușor este de utilizat. Încărcarea conținutului poveștii și descărcarea rezultatelor durează doar câteva clicuri.

Acest lucru face din Lore Machine un exemplu excelent al unui nou val de instrumente: ușor de utilizat, dar care ascunde o putere incredibilă în spatele unei interfețe web incredibil de simplă.

„Este mult de lucru de făcut pentru a actualiza noile instrumente AI, iar interfețele și fluxurile de lucru sunt diferite pentru fiecare instrument ”, a declarat Ben Palmer, CEO al New Computer Corporation, o companie de creare de conținut. "Există o mulțime de atracție pentru utilizarea unui instrument mare, cu o interfață de utilizator consistentă. Simt că acolo își va găsi baza industria."

Campion a fondat compania din spatele Lore Machine acum doi ani pentru a dezvolta o versiune blockchain a Wikipedia. Dar când a văzut cum oamenii aplică modele generative, Campion și-a schimbat direcția. Campion a folosit modelul gratuit text-to-image Midjourney pentru a crea o versiune comică a piesei The Rime of the Ancient Mariner a lui Samuel Taylor Coleridge . El a spus că lucrarea a devenit virală, dar procesul de realizare nu a fost distractiv.

„Soția mea a urât acel proiect ”, a spus Campion. „În fiecare noapte, stau treaz până la 4 dimineața încercând să fac fotografiile perfecte .” Problema este că modelele text-to-image precum Midjourney generează imagini pe rând. Acest lucru face dificilă menținerea coerenței între diferitele imagini ale aceluiași personaj. Chiar și blocarea unui stil specific în mai multe imagini poate fi dificilă.

Această experiență l-a făcut să realizeze că tehnologia trebuie să fie mult mai ușor de utilizat. Campion nu spune exact cum Lore Machine reușește să-și păstreze imaginile și stilul consecvent într-o serie de ilustrații. Este destul de bine, dar nu perfect: într-o scenă din povestea autoarei, un personaj cu părul scurt primește brusc breton și există și o scenă în care un personaj apare de două ori - într-un loc diferit.

De asemenea, ilustrațiile capătă treptat un aspect generic. Autorul a fost dezamăgit de faptul că multe dintre descrierile personajelor erau foarte specifice, dar nu erau prezentate în ilustrații. Totuși, în comparație cu realizarea manuală a fiecărui cadru, Lore Machine a fost un pas uriaș înainte.

„Consistența este remarcabilă”, spune Ryder . A oferit companiei lui Ryder Modern Arts suficientă încredere pentru a folosi Lore Machine într-un proiect cu un client. „ Dacă trebuie să ne întoarcem în mod constant și să remediem problemele de consecvență, nu avem cum să livrăm la timp . ”

La fel ca toate celelalte modele generative, tehnologia din spatele Lore Machine poate genera conținut rău intenționat la cerere. Campion a spus că încearcă să împiedice crearea de imagini care înfățișează violența sau ura - dar, în același timp, nu a vrut să limiteze expresia creativă a artiștilor.

O mare parte din interesul inițial pentru Lore Machine a venit de la firme de marketing. Dar Campion speră că lansarea largă va încuraja mai mulți utilizatori să o încerce. Campion a spus că în urmă cu șase luni, a primit un apel de la directorul unei școli pentru copii cu dizabilități din Manhattan. Directorul a vrut să-și ruleze manualele prin acest instrument, astfel încât copiii să poată vedea imaginile. " Nici nu m-am gândit la asta. Eram atât de blocat în mentalitatea de la Hollywood ", a spus Campion.