Od dziecka byłem wielkim fanem komiksów – szybkie tempo, piękna grafika, wyraziste twarze – jeden obraz mógł opowiedzieć połowę historii. Jakiś czas temu zacząłem tworzyć własną serię komiksów „Neon Divide”, opowieść science fiction rozgrywającą się w dystopijnym miasteczku, gdzie walutą są wspomnienia. Skończyłem scenariusz i dialogi, ale jeśli chodzi o stronę graficzną, napotkałem przeszkodę.
Lubię profesjonalne umiejętności rysowania i niestety nie stać mnie na zatrudnienie profesjonalnego artysty do zilustrowania całej serii. Dlatego postawiłem sobie za cel znalezienie najlepszego generatora komiksów opartego na sztucznej inteligencji, który pomógłby mi wygenerować grafiki potrzebne do mojego projektu bez uszczerbku na jakości i tonacji.
Początkowo miałem nadzieję, że uda mi się wybrać pierwszy generator komiksów oparty na sztucznej inteligencji, jaki zobaczę, i że spełni on moje potrzeby. Jednak po przetestowaniu kilku opcji zrozumiałem, że ten proces jest o wiele bardziej skomplikowany, niż myślałem. Chciałem rozwiązania, które nie tylko wygeneruje postacie, ale także zachowa spójny styl graficzny w wielu scenach, jednocześnie zachowując moje opisy oświetlenia, nastroju i perspektywy, a także umiejscowienia dialogów.
Chciałem znaleźć platformę, która pozwoliłaby mi przekształcić mój scenariusz w dopracowane kadry komiksowe, a nie pojedyncze obrazy. Miałem też nadzieję wypróbować różne kąty widzenia, mimikę twarzy i efekty wizualne. Co więcej, zależało mi na sztucznej inteligencji, która zachowałaby ciągłość między kadrami, aby wszystkie wydawały się częścią tego samego komiksu.
To skłoniło mnie do wypróbowania wielu generatorów sztucznej inteligencji do komiksów i kreskówek. Do każdego z nich dodałem te same sceny z Neon Divide, oceniając, jak dobrze radzą sobie z tonem, ekspresją, detalami i spójnością wizualną. Niektóre platformy świetnie radziły sobie z akcją, ale nie potrafiły zachować spójnego wyglądu postaci. Inne z kolei świetnie radziły sobie z generowaniem mimiki twarzy, ale tła wyglądały płasko i bez polotu.
Ponieważ miałem mnóstwo pracy, postanowiłem zaprosić kolegów z Zespołu fixthephoto do przetestowania tych platform. Wspólnie stworzyliśmy listę najpopularniejszych twórców komiksów opartych na sztucznej inteligencji, określiliśmy nasze wymagania i zaczęliśmy tworzyć komiksy na różne potrzeby.
Kiedy po raz pierwszy testowałem Adobe Firefly nie spodziewałem się, że stanie się on najlepszym generatorem komiksów AI na liście. Używałem go w przeszłości do projektowania graficznego, ale nigdy do generowania sekwencyjnych grafik.
Zacząłem od przedstawienia krótkich scen z moich scenariuszy, na przykład „dwie postacie rozmawiające na deszczowej ulicy, przy delikatnym oświetleniu neonowym”, a Firefly w ciągu kilku sekund dostarczył piękne panele, które dokładnie spełniły moje wymagania.
Szczególnie doceniłem możliwości personalizacji stylistycznej oferowane przez tę platformę. Pozwala ona na dostosowanie grubości linii i kontrastu, a także na wybór konkretnych nastrojów, w tym „nostalgicznej mangi” lub „brudnych odcieni noir”.
Co więcej, udało mi się z łatwością zintegrować Firefly z Photoshop, co znacznie usprawniło późniejszy proces edycji. Jeśli Twoim celem jest tworzenie profesjonalnej jakości grafiki komiksowej, a jednocześnie pełna kontrola nad overwszystkimi jej aspektami, Firefly to strzał w dziesiątkę.
ComicsMaker AI to fantastyczne rozwiązanie dla twórców, którzy skupiają się na fabule, takich jak ja. Zamiast bawić się kilkoma narzędziami, użyłem tej platformy do stworzenia zarówno grafiki, jak i układów paneli.
Zaimportowałem swój scenariusz, wybrałem styl graficzny, który mi odpowiadał (decydując się na półrealistyczne podejście do mangi) i w ciągu zaledwie kilku minut sztuczna inteligencja ComicsMakera wygenerowała pierwsze 3 strony mojego projektu. Następnie mogłem zmienić układ poszczególnych elementów, edytować dialogi lub ponownie renderować obrazy bez konieczności zaczynania od nowa.
A co najlepsze? Doskonale zachowuje wygląd postaci między panelami, co jest wadą zdecydowanej większości Generatory sztuki AI. W moim teście stworzyłem 6-stronicowy komiks w niecałe dwie godziny, co w innym przypadku prawdopodobnie wymagałoby tygodnia pracy ręcznej. ComicsMaker AI ma problemy ze złożonymi tłami, ale jeśli priorytetem jest dla Ciebie spójna narracja, będziesz zadowolony z tego wyboru.
To rozwiązanie sprawiło, że czułem się, jakbym pracował z kolegą z pracy, a nie próbował tworzyć komiksu za pomocą sztucznej inteligencji. Dostarczyłem krótki opis sceny i dialogi, a AI Comic Factory automatycznie podzieliło je na panele, wygenerowało dymki i zadbało o to, aby mimika twarzy była adekwatna do każdej linijki. Doceniłem również inteligencję układu tego Generatora obrazów AI, ponieważ powiększał obraz, aby pokazać emocje i tworzył szersze sceny akcji.
Stworzyłem scenę walki fantasy, a ta platforma świetnie poradziła sobie z renderowaniem dynamicznego ruchu. Linie przypominają te z westernów, tworząc efektowne, czyste, nieco przesadzone linie. Tworzenie oddzielnych paneli jest proste, ale wydajność może nieco spaść w przypadku bardzo skomplikowanych obrazów. Ogólnie rzecz biorąc, jeśli Twoim celem jest znalezienie wszechstronnego, pełnowymiarowego generatora komiksów opartego na sztucznej inteligencji, to jest to świetna opcja.
Korzystając z Dashtoon, zacząłem od zaimportowania szkiców i podpowiedzi do menu „Storyboard to Comic” (Storyboard do komiksu). Sztuczna inteligencja rozpoznała postacie z niewielkiej ilości zaimportowanych referencji, dodała je do wbudowanej biblioteki postaci i wygenerowała rendery panel po panelu o spójnym wyglądzie. Jest to niezwykle szybkie narzędzie, które w zaledwie kilka minut dostarczyłoby rezultaty, które wymagałyby godzin Illustrator i Photoshop pracy. Biblioteka postaci Dashtoon i deklaracje dotyczące „Style DNA” okazały się uzasadnione: moja główna postać zachowała fryzurę, ubranie i twarz na wszystkich wygenerowanych panelach.
Następnie wykorzystałem funkcjonalność edycji tego oprogramowania do sztucznej inteligencji, dostosowując rozmiary paneli, stosując cyberpunkową estetykę zarządzania i tworząc dymki z tekstem. Ten kreator komiksów oparty na sztucznej inteligencji posiada również funkcję Magic Erase do usuwania niechcianych elementów, a także automatyczne kolorowanie.
ImagineArt daje pełną swobodę w tworzeniu komiksów. Użyłem go do stworzenia postaci do komiksu o onirycznej scenerii, który przypominał klimaty znane z Papriki i Blade Runnera. Ten generator grafiki komiksowej ze sztuczną inteligencją świetnie oddał wyobrażony przeze mnie styl wizualny, tworząc postacie o wyrazistych twarzach i sugestywnej harmonii kolorów. Uwielbiam dramatyczne efekty, jakie można uzyskać, na przykład kinowe oświetlenie lub nakładanie stylistycznych nakładek, które nadają scenie określony wygląd.
Szczególnie podobała mi się wyobraźnia włożona w tworzenie kompozycji. Dostarczyłem niekonwencjonalne podpowiedzi, takie jak „pływające miasto odbite w oceanie światła”, a ten twórca komiksów przekształcił je w urzekające, komiksowe tła o wysokiej rozdzielczości. Chociaż musiałem skorzystać z innej platformy do tworzenia paneli i dymków, główną zaletą ImagineArt jest możliwość generowania wizualnie inspirujących klatek kluczowych.
Podobało mi się, jak skutecznie Komiko zapamiętuje projekty różnych postaci i jak łatwo umieszcza dymki dialogowe w pustych miejscach. Co więcej, ta aplikacja do zdjęć z kreskówek pozwala publikować swoje dzieła online za pomocą zaledwie kilku kliknięć. Ogólnie rzecz biorąc, Komiko jest skierowane przede wszystkim do twórców, którzy interesują się opowiadaniem historii, ale nie posiadają niezbędnych umiejętności technicznych.
CharGen nie jest dedykowanym narzędziem do tworzenia komiksów, ale jest świetnym narzędziem do zapewnienia spójności postaci, co zazwyczaj stanowi duży problem w przypadku innych narzędzi. Pomogło mi stworzyć zestaw postaci, zanim zacząłem tworzyć poszczególne panele. Po ustaleniu stylu i ustaleniu półrealistycznej estetyki anime, stworzyłem over20 wyrazów twarzy i póz dla każdego członka obsady.
Zachowuje proporcje, ubiór i strukturę twarzy na różnych obrazach. Następnie otworzyłem wygenerowane postacie w formacie Photoshop, aby ręcznie stworzyć panele. Nie jest to oszałamiające, ale jeśli zależy Ci na ciągłości wizualnej i szczegółowym budowaniu świata, CharGen to świetna opcja do rozważenia.
Zatrudniłem Fantoons do stworzenia zestawu animowanych obrazów AI do komediowego, trzypanelowego komiksu o leniwym androidzie-bariście, który nie potrafi usiedzieć wystarczająco długo, by przyjąć zamówienie. Udzieliłem kilku krótkich wskazówek dotyczących postaci i nastroju: „głupi android, przytulna kawiarnia, przerysowany styl kreskówkowy” – i po zaledwie kilku sekundach platforma wygenerowała obrazy wyglądające jak wyjęte z kreskówki z sobotniego poranka.
Szczególnie podoba mi się sposób, w jaki ten generator kreskówek tworzy mimikę twarzy. Twarz androida zmieniała się z sennej na spanikowaną, a następnie na arogancką w idealnej sekwencji, a tło, choć proste, pasowało do tonu, zamiast odwracać uwagę od sceny. To rozwiązanie również poprawnie interpretowało puenty, przekazując ideę mojego komiksu. Ten Edytor zdjęć AI pozwolił mi dostosować paletę kolorów, aby uzyskać łagodniejsze odcienie, pasujące do brandingu moich stron w mediach społecznościowych.
W przeciwieństwie do większości innych generatorów grafiki AI do komiksów i kreskówek, to rozwiązanie opiera się na modelach open source, co wymaga nieco większego nakładu pracy. Wypróbowałem kilka modeli dyfuzji zoptymalizowanych pod kątem grafiki w stylu mangi, szukając jednocześnie opcji, które dobrze generowałyby spójne projekty postaci. Do tego testu wybrałem wspomniany wcześniej projekt Neon Divide. Chciałem sprawdzić, czy Hugging Face potrafi stworzyć spójne sceny o kinowym, ręcznie rysowanym charakterze.
Po przeprowadzeniu wielu szybkich eksperymentów („neonowa alejka, odblaskowe powierzchnie, protagonista z mechanicznym okiem, widok panelu od dołu”), uzyskałem rezultaty, które niemal idealnie odpowiadały mojej wizji. Hugging Face jest również imponująco wszechstronny, pozwalając mi dostosowywać wagi modeli, wartości początkowe, a nawet łączyć punkty kontrolne, aby łączyć style. W związku z tym, wygenerowałem tło za pomocą jednego modelu, a postacie za pomocą drugiego, zanim połączyłem je w Photoshop.
Jeśli Twoje pragnienie stworzenia komiksu z wykorzystaniem sztucznej inteligencji wykracza poza generowanie wizualizacji, Perchance zasługuje na Twoją uwagę. Chociaż nie generuje obrazów, platforma ta może być używana w połączeniu z innymi narzędziami do stworzenia pełnego cyklu produkcyjnego. Pomogła mi przełamać blokadę twórczą, gdy zastanawiałem się, w jakim kierunku rozwijać swój komiks.
Ponadto Perchance pomógł mi wymyślić nowe pomysły na sceny i postacie („scena: futurystyczna, nastrój: melancholijny, typ postaci: niechętny bohater, zwrot akcji: bunt sztucznej inteligencji”), oferując różne kombinacje w oparciu o udostępnione narzędzia.
Nie wszystkie wyniki są sensowne, ale jeśli trafią w Twój gust, poczujesz, że trafiłeś w dziesiątkę. Na przykład, w pewnym momencie „Perchance” zainspirował mnie do stworzenia krótkiego komiksu o starym pilocie mecha pracującym w barze z ramenem. Po sfinalizowaniu koncepcji fabuły, użyłem innej platformy do generowania wizualizacji.
Po podaniu skomplikowanej podpowiedzi scenicznej („dwóch astronautów kłócących się w słabo oświetlonym kokpicie, napięcie emocjonalne, filmowe ujęcie”), Llamagen stworzył zarówno obrazy, jak i dialogi pasujące do historii. Co więcej, mimika twarzy idealnie pasowała do dymków, a tempo historii wydawało się naturalne. Co więcej, wygenerowany przez sztuczną inteligencję komiks świetnie dostosował kąty kamery, aby zwiększyć emocjonalny impact przekaz obrazu.
Oczywiście, nie jest to rozwiązanie idealne. Twarze postaci mogą być zniekształcone, a sztuczna inteligencja czasami interpretuje scenariusz zbyt dosłownie, zmuszając do ponownego generowania danych wyjściowych. Sztuczna inteligencja Llamagen wciąż sprawia wrażenie, jakby była na wczesnym etapie rozwoju, ale ma duży potencjał. Jeśli platforma będzie się rozwijać, w końcu pozwoli na stworzenie komiksu w całości przy użyciu sztucznej inteligencji, łącząc obrazy, dialogi i reżyserię. Nawet teraz sprawia wrażenie responsywnego współscenarzysty o niesamowitych umiejętnościach artystycznych.
Kiedy FixThePhoto postanowiliśmy przetestować najlepsze generatory komiksów oparte na sztucznej inteligencji, odkryliśmy zupełnie nowy wymiar cyfrowego opowiadania historii. Nasza ekipa składała się ze mnie, Robin Owens, Evy Williams i Vadyma Antypenko, ponieważ stanowiliśmy połączenie komiksowych nerdów i ciekawskich recenzentów technologicznych.
Ponieważ każdy z nas specjalizuje się w innej dziedzinie, skupiliśmy się na różnych aspektach: Robin na płynności fabuły i generowaniu dialogów, Eva na spójności wizualnej i jakości obrazu, a Vadym, nasz wewnętrzny geniusz techniczny, na testowaniu monitów, wydajności renderowania i stabilności modelu.
Zaczęliśmy od wybór szerokiej gamy kreatorów komiksów i generatorów powieści graficznych opartych na sztucznej inteligencji – od intuicyjnych rozwiązań, które pozwalają stworzyć całą historię za pomocą kilku kliknięć, po bardziej profesjonalne narzędzia, które wymagają niestandardowych wskazówek i edycji. Wykorzystaliśmy ta sama koncepcja bazowa na wszystkie platformy – krótki komiks science fiction o podróżniku w czasie uwięzionym między alternatywnymi rzeczywistościami. Sprawdziliśmy, jak każda z opcji radziła sobie zarówno z oprawą wizualną, jak i narracją, a także ze spójnością postaci i tonem emocjonalnym.
Utworzyliśmy kreatywny kanał, który składał się z pisanie krótkiej sceny , a następnie dodawaliśmy je do narzędzia AI za pomocą opisowych podpowiedzi. Po wygenerowaniu obrazów ocenialiśmy, jak dobrze narzędzie opowiada historię i zachowuje projekty postaci z panelu na panel. Zmierzyliśmy również prędkość renderowania i odnotowaliśmy efektywność edycji i ponownego generowania wyników.
Po zakończeniu testów nasza wspólna przestrzeń robocza została setki paneli generowanych przez sztuczną inteligencję – niektóre oszałamiające, inne całkowicie nie do przyjęcia. Odkryliśmy, że wszystkie generatory kreskówek i komiksów oparte na sztucznej inteligencji mają swoje „preferencje”: niektóre generują bardziej realistyczne obrazy, podczas gdy inne są bliższe stylistyce anime/mangi. Ogólnie rzecz biorąc, wydajność tych narzędzi jest niesamowita, ponieważ wygenerowanie sceny, która zazwyczaj wymagałaby godzin pracy ręcznej, zajmuje zaledwie kilka minut.
To interesujący proces, który łączy artystyczną wizję i doradztwo z generowaniem maszynowym. Jak opisała to Eva podczas jednego z naszych spotkań: „Sztuczna inteligencja nie zastępuje twórców komiksów – po prostu daje nam szybszy, bardziej szalony szkicownik”.