Twórz lokalnie sztukę AI: aplikacje do stabilnego rozpowszechniania i inne modele głębokiego uczenia się

Wygląda na to, że sztuka AI jest obecnie na ustach wszystkich - i oczach. Oprócz całkowicie zdezorientowanych kompozycji, czasami istnieją bardzo przyzwoite obrazy z poszczególnych programów, które mogą tworzyć obrazy lokalnie za pomocą „Stable Diffusion” i innych modeli głębokiego uczenia się. Jeśli chodzi o Apple Mac, te aplikacje są przeznaczone głównie dla modeli z chipami „Apple Silicon”; nie znajdziesz wersji Intel. System operacyjny również powinien być aktualny, ponieważ programy są w większości Monterey oder sogar Ventura przypuszczać. Poniżej znajdują się informacje o Mochi Diffusion, Diffusers, AI Photo i Invoke AI.

Podgląd: konfiguracja, której używam do wypróbowywania aplikacji

Aplikacje do tworzenia grafiki AI na Apple Mac są zaprojektowane przede wszystkim dla chipów M, tj M1 Pro i M1 Maxna Chip M2 jak i na nowych M2 Pro i M2 Max. Ponadto należy zawsze mieć zainstalowany najnowszy system operacyjny, aby zapewnić kompatybilność z programami. Osobiście pracuję obecnie z tą konfiguracją, która dobrze nadaje się do testowania wspomnianych aplikacji AI:

• Urządzenie: 16-calowy MacBook Pro z 2021 r.
• System na chipie: Apple M1 Pro
• Rdzenie procesora: 10 / rdzenie GPU: 16
• Pamięć RAM: 16 GB pamięci współdzielonej
• System operacyjny: macOS Ventura 13.2

Mochi Diffusion – Mój aktualny faworyt

W ostatnich dniach stawiałem pierwsze kroki w dziedzinie AI art. Przeglądałem różne aplikacje na macOS. Ten, który moim zdaniem jest najlepszy do tej pory, nazywa się Mochi Diffusion. Nie jest to najłatwiejsze, jeśli chodzi o instalowanie i integrowanie modeli głębokiego uczenia się — ale możesz to zrobić. Następnie możesz wprowadzić opisy obrazów, określić rzeczy, które nie powinny się wydarzyć, ustawić liczbę kroków roboczych i intensywność AI i więcej. Ponadto można wyprowadzić nie tylko jeden obraz, ale do 100 prób na monit w celu zadowalającego wdrożenia wprowadzonych instrukcji.

Oprócz stabilnej dyfuzji można również zastosować modele głębokiego uczenia, takie jak Fruity Mix, Anything, Redshift Diffusion i tym podobne. Niektóre są lepsze do krajobrazów, inne do ludzi, jeszcze inne do zwierząt lub przedmiotów, a jeszcze inne do naśladowania stylów artystycznych. Tutaj musisz albo przeczytać, albo wypróbować wszystko i zanotować, które modele i które ustawienia są najlepsze dla twoich własnych celów. Od wizerunku postaci z D&D na karcie postaci po fikcyjną grafikę w stylu konkretnej osoby — wszystko jest możliwe. Można też stworzyć science fiction lub krokodyla w cylindrze.

Pobierz Mochi Difusion

Możesz znaleźć bezpłatne pobieranie Mochi Diffusion z tym linkiem na GitHubie. Dostępny jest tam również kod źródłowy oprogramowania open source. Aby zasilić oprogramowanie modelami, z których następnie czerpane są niezbędne zasoby do tworzenia obrazu, najlepiej odwiedzić ta strona internetowa. Istnieją modele zaprojektowane dla technologii Apple „Core ML”, obecnie 38 sztuk. Dla każdego z nich znajduje się krótki opis i przykładowe zdjęcia. Za fajnie zaprojektowane obrazki komiksowe, które powinny wyglądać jak narysowane tuszem, np. B. Rozpowszechnienie Inkpunka. Każdy z modeli ma rozmiar kilku gigabajtów. Po pobraniu i rozpakowaniu wciągnij je Macintosh HD/Users/[nazwa]/Documents/MochiDiffusion/models.

Dyfuzory - Prostsze, ale też całkiem dobre

Chociaż jestem głównie w Mochi Diffusion, mam też zainstalowane inne aplikacje do tworzenia grafiki AI. Jednym z nich są dyfuzory. Jest dostarczany z różnymi modelami „Stable Diffusion” i może być również zasilany monitami (opisy obrazów) i monitami negatywnymi (treści, które nie powinny pojawiać się na obrazie). Można zdefiniować do 150 kroków roboczych, ale nie można zdefiniować intensywności AI. Podsumowując, jest to podobna aplikacja, ale z mniejszą liczbą opcji dostosowywania. Przydaje się jednak do pierwszych kroków, tym bardziej, że można go również bezpłatnie pobrać i używać.

Pobieranie dyfuzora

Dyfuzorzy nie potrzebują wycieczki do GitHub i innych witryn — i oni też nie terminal-Wejścia. Ponieważ ta aplikacja jest oferowana w Mac App Store. Z tym linkiem przechodzisz bezpośrednio do oferty. Znajdziesz tam również pierwsze przykładowe obrazy, w tym przykład „Labrador w stylu Vermeera”, który jest wyświetlany po pierwszym uruchomieniu aplikacji. Przypomina to trochę jeden z najsłynniejszych obrazów Vermeera, Dziewczyna z perłą. 

AI Photo - Sortowanie obrazów jako wielka siła

Chociaż miałem dobre doświadczenia z Mochi Diffusion podczas tworzenia krajobrazów, postaci fantastycznych, zwierząt, pojazdów i scen science fiction, aplikacja AI Photo przekonała mnie do zupełnie innej rzeczy: sortowania utworzonych obrazów. Oprócz przeglądu „Wszystkie obrazy” dostępne są różne „Kolekcje”, które można dowolnie rozszerzać o własne foldery. Od kotów, przez architekturę, po tekstury, wszystko można tutaj uporządkować i szybko znaleźć. Istnieje również funkcja wyszukiwania i można zaznaczyć ulubione. Więc jeśli pracujesz z dużą ilością obrazów AI, powinieneś spróbować AI Photo.

Pobieranie zdjęć AI

AI Photo można również łatwo pobrać z oficjalnego sklepu Mac App Store — Tędy. Nie musisz więc szukać odpowiedniej wersji na GitHubie ani używać terminala do jakichkolwiek skryptów. Wraz z tym programem wychodzą również przydatne zdjęcia. Oczywiście tutaj też trzeba się trochę pobawić i od czasu do czasu dopracować specyfikacje, aby uzyskać dokładnie taki obraz, jaki chcemy. Ale to, co musisz zachować ogólnie, a co musisz szczegółowo opisać, nauczysz się z czasem. Wymagana jest odrobina cierpliwości.

Invoke AI — najbardziej skomplikowana instalacja ze wszystkich

Cenię społeczność programistów i uwielbiam GitHub, oprogramowanie typu open source dostępne gdzie indziej, a także ofertę bezpłatnych aplikacji. Ale możesz też niepotrzebnie skomplikować instalację. Czasami (łatwość) instalacji i użytkowania opracowanej aplikacji nie wydaje się być tak ważna jak wykonalność projektu. Przynajmniej tak myślę o Invoke AI. Próbowałem pobrać GitHub (można znaleźć tutaj) z instrukcje z tej strony do realizacji za pośrednictwem terminala. Ale to nie zadziałało z powodu niektórych błędów Pythona lub czegoś takiego. 

Muszę przyznać, że nie zwlekałem długo z rozwiązaniem błędu. Po tym, jak druga próba się nie powiodła, odłożyłem test Invoke AI na czas nieokreślony. Jeśli jednak udało Ci się pomyślnie zainstalować aplikację i zauważyłeś szczególne zalety (zwłaszcza w porównaniu z innymi przedstawionymi tutaj aplikacjami), zostaw komentarz. Nie mogę się doczekać, aby zobaczyć, co program może zrobić i czy był w stanie cię przekonać. Osobiście w tej chwili czuję się po prostu wzmocniony moim życzeniem, aby programiści pomyśleli o zwykłym użytkowniku i maksymalnie ułatwili instalację oprogramowania.

Johannes Domke

Po ukończeniu szkoły średniej Johannes odbył praktykę jako asystent biznesowy specjalizujący się w językach obcych. Po tym jednak zdecydował się na badania i pisanie, z których został samozatrudniony. Od kilku lat pracuje m.in. dla Sir Apfelota. Jej artykuły obejmują premiery produktów, wiadomości, poradniki, gry wideo, konsole i nie tylko. Śledzi Apple Keynotes na żywo za pośrednictwem transmisji strumieniowej.