Przekształć historię w komiks za pomocą Lore Machine

Dwanaście lat temu autor Will Douglas Heaven napisał w wolnym czasie zabawne opowiadanie o mężczyźnie pasjonującym się luksusową karmą dla kotów. Teraz powstała platforma generatywnej sztucznej inteligencji o nazwie Lore Machine, która pomogła przekształcić tę ciekawą historię w komiks.

Autor umieszcza swoją historię w polu tekstowym i otrzymuje wiadomość: „ Identyfikujemy sceny, lokalizacje, postacie i emocje. Może to potrwać do 2 minut ”. Lore Machine przeanalizował tekst, wyodrębnił opisy wspomnianych osób i miejsc, a następnie przekazał te informacje do modelu generującego obraz.

Na ekranie pojawia się ilustrowany storyboard. Kiedy autor przegląda żywe, komiksowe ilustracje swoich niemal zapomnianych bohaterów, sprawy przybierają zaskakujący obrót.

Po ponad roku prac rozwojowych Lore Machine zadebiutowało publicznie. Za 10 USD miesięcznie możesz przesłać maksymalnie 100 000 słów (maksymalnie 30 000 słów na przesłanie) i utworzyć 80 obrazów do opowiadań, scenariuszy, transkrypcji podcastów i nie tylko. Istnieją także poziomy dla użytkowników zaawansowanych, w tym plan Enterprise za 160 USD miesięcznie obejmujący 2,24 miliona słów i 1792 obrazy. Ilustracje dostępne są w różnorodnych stylach: od mangi, przez akwarele, aż po programy telewizyjne z lat 80.

Zac Ryder — założyciel agencji kreatywnej Modern Arts — korzysta z wczesnej wersji tego narzędzia od czasu, gdy założyciel Lore Machine, Thobey Campion, pokazał Ryderowi, co ono potrafi. Ryder przesłał do systemu scenariusz krótkiego filmu, a Lore Machine w ciągu jednej nocy przekształcił go w 16-stronicową powieść komiksową.

„Pamiętam, jak Thobey udostępnił swój ekran. Wszyscy byliśmy całkowicie oszołomieni” – powiedział Ryder. „Chodzi nie tylko o aspekt wizualny, ale też o opowiadanie historii: od fabuły po emocje postaci, wszystko było idealne od samego początku”.

Modern Arts pracuje obecnie nad stworzeniem fikcyjnego uniwersum na potrzeby serii komiksów, opartej na scenariuszu napisanym przez twórcę serialu Netflixa Miłość, śmierć i roboty .

Lore Machine zbudowano ze znanych komponentów:

• Duży model językowy (LLM) skanuje Twój tekst, identyfikując opisy ludzi, miejsc, a także ogólne nastroje.
• Obraz zostanie wygenerowany na podstawie wersji Stable Diffusion.

Jednakże to, co wyróżnia Lore Machine, to łatwość obsługi. Do przesłania treści artykułu i pobrania wyników wystarczy zaledwie kilka kliknięć.

Dzięki temu Lore Machine jest doskonałym przykładem nowej fali narzędzi: przyjaznych dla użytkownika, a jednocześnie skrywających niesamowitą moc za niezwykle prostym interfejsem internetowym.

„Trzeba wykonać mnóstwo pracy, aby zaktualizować nowe narzędzia AI, a interfejsy i przepływy pracy są różne dla każdego narzędzia ” — powiedział Ben Palmer, dyrektor generalny New Computer Corporation, firmy zajmującej się tworzeniem treści. „Używanie jednego dużego narzędzia ze spójnym interfejsem użytkownika jest bardzo atrakcyjne. Uważam, że to właśnie tam branża znajdzie swoje oparcie”.

Dwa lata temu Campion założył firmę Lore Machine, której celem było opracowanie wersji Wikipedii opartej na technologii blockchain. Ale gdy zobaczył, jak ludzie stosują modele generatywne, Campion zmienił kierunek. Campion wykorzystał darmowy model zamiany tekstu na obraz Midjourney, aby stworzyć komiksową wersję opowiadania Samuela Taylora Coleridge'a Rymy o starym żeglarzu . Powiedział, że jego dzieło stało się popularne, ale sam proces jego tworzenia nie był żadną przyjemnością.

„Mojej żonie ten projekt się nie podobał ” – powiedział Campion. „Co noc siedzę do czwartej rano, próbując zrobić idealne zdjęcia ”. Problem polega na tym, że modele przetwarzania tekstu na obraz, takie jak Midjourney, generują obrazy pojedynczo. Utrudnia to zachowanie spójności pomiędzy różnymi wizerunkami tej samej postaci. Nawet ustalenie określonego stylu dla wielu obrazów może okazać się trudne.

To doświadczenie uświadomiło mu, że technologia powinna być znacznie łatwiejsza w użyciu. Campion nie zdradza dokładnie, w jaki sposób Lore Machine udaje się zachować spójność wizualną i stylistyczną w całej serii ilustracji. Jest całkiem niezła, ale nie idealna: w jednej ze scen opowiadania autora postać z krótkimi włosami nagle dostaje grzywkę, a jest też scena, w której postać pojawia się dwa razy – w różnych miejscach.

Ilustracje stopniowo nabierają ogólnego charakteru. Autor był rozczarowany faktem, że wiele opisów postaci było bardzo szczegółowych, a nie znalazło to odzwierciedlenia na ilustracjach. Mimo wszystko, w porównaniu do ręcznego tworzenia każdej klatki, Lore Machine był ogromnym krokiem naprzód.

„Konsekwencja jest niezwykła” – mówi Ryder . Dzięki temu firma Rydera, Modern Arts, nabrała pewności siebie i zdecydowała się na wykorzystanie Lore Machine w projekcie realizowanym dla klienta. „ Jeśli będziemy musieli ciągle wracać i naprawiać problemy ze spójnością, nie będzie szans, żebyśmy mogli dostarczyć produkt na czas ” .

Podobnie jak wszystkie inne modele generatywne, technologia stojąca za Lore Machine może generować złośliwą treść na żądanie. Campion powiedział, że starali się zapobiegać tworzeniu obrazów przedstawiających przemoc lub nienawiść, ale jednocześnie nie chcieli ograniczać twórczej ekspresji artystów.

Początkowo dużą część zainteresowania Lore Machine wykazały firmy marketingowe. Campion ma jednak nadzieję, że szeroka dystrybucja zachęci większą liczbę użytkowników do wypróbowania aplikacji. Campion powiedział, że pół roku temu odebrał telefon od dyrektora szkoły dla dzieci niepełnosprawnych na Manhattanie. Dyrektor szkoły chciał sprawdzić w tym narzędziu swoje podręczniki, aby dzieci mogły zobaczyć obrazki. „ Nawet o tym nie pomyślałam. Byłam tak uwięziona w mentalności Hollywood ” – powiedziała Campion.