Crea arte AI localmente: app per una diffusione stabile e altri modelli di deep learning

Sembra che l'arte dell'IA sia attualmente sulla bocca e sugli occhi di tutti. Oltre a composizioni completamente confuse, a volte ci sono immagini di tutto rispetto dai singoli programmi che possono creare immagini localmente con "Stable Diffusion" e altri modelli di deep learning. Per quanto riguarda l'Apple Mac, queste app sono realizzate principalmente per modelli con chip "Apple Silicon", non troverai versioni Intel. E anche il sistema operativo dovrebbe essere aggiornato, poiché i programmi lo sono per lo più Monterey oder sogar fortuna assumere. Quanto segue riguarda Mochi Diffusion, Diffusers, AI Photo e Invoke AI.

Di seguito ti presenterò quattro programmi per creare arte AI localmente su Apple Mac. Ne ho provati tre io stesso. Anche il quarto dovrebbe essere buono, ma ho fallito con l'installazione.
Di seguito ti presenterò quattro programmi per creare arte AI localmente su Apple Mac. Ne ho provati tre io stesso. Anche il quarto dovrebbe essere buono, ma ho fallito con l'installazione.

Anteprima: la configurazione che utilizzo per provare le app

Le app per la creazione di arte AI su Apple Mac sono progettate principalmente per chip M, ovvero il M1 Pro e M1 Max, alla Chip M2 così come su quelli nuovi M2 Pro e M2 Max. Inoltre, dovresti sempre avere installato il sistema operativo più recente per garantire la compatibilità con i programmi. Personalmente, attualmente sto lavorando con questa configurazione, che si presta bene per testare le app AI citate:

  • Gerat: MacBook Pro da 16 pollici del 2021
  • Sistema su chip: Apple M1 Pro
  • Core CPU: 10 / Core GPU: 16
  • RAM: 16 GB di memoria condivisa
  • Sistema operativo: macOS Ventura 13.2

Mochi Diffusion – Il mio preferito attuale

Negli ultimi giorni ho mosso i primi passi nel campo dell'arte AI. Ho esaminato varie app per macOS. Quello che penso sia il migliore finora si chiama Mochi Diffusion. Non è il più semplice quando si tratta di installare e integrare modelli di deep learning, ma puoi farlo. È quindi possibile inserire descrizioni delle immagini, specificare cose che non dovrebbero verificarsi, impostare il numero di fasi di lavoro e l'intensità dell'IA e altro ancora. Inoltre, non solo un'immagine può essere emessa, ma fino a 100 tentativi per prompt per implementare in modo soddisfacente le istruzioni immesse.

Mochi Diffusion è attualmente il mio preferito per le opzioni di personalizzazione e la facilità di implementazione di vari modelli di deep learning. Tuttavia, ho appena iniziato ad approfondire l'argomento.
Mochi Diffusion è attualmente il mio preferito per le opzioni di personalizzazione e la facilità di implementazione di vari modelli di deep learning. Tuttavia, ho appena iniziato ad approfondire l'argomento.

Oltre alla diffusione stabile, possono essere utilizzati anche modelli di deep learning come Fruity Mix, Anything, Redshift Diffusion e simili. Alcuni sono migliori per i paesaggi, altri per le persone, altri ancora per animali o oggetti e altri ancora per imitare stili artistici. Qui devi leggere o provare tutto e prendere nota di quali modelli e quali impostazioni sono i migliori per i tuoi scopi. Dall'immagine di un personaggio di D&D per la scheda del personaggio a un'opera immaginaria nello stile di una persona specifica, tutto è possibile. Si possono anche creare fantascienza o un coccodrillo con un cappello a cilindro.

Scarica la diffusione di Mochi

Puoi trovare il download gratuito di Mochi Diffusion con questo link su GitHub. Qui è disponibile anche il codice sorgente del software open source. Per alimentare il software con modelli, da cui poi vengono tratte le risorse necessarie per la creazione dell'immagine, è meglio visitare questo sito web. Esistono modelli progettati per la tecnologia Apple “Core ML”, attualmente 38 pezzi. C'è una piccola descrizione e immagini di esempio per ciascuno. Per immagini comiche dal design accattivante che dovrebbero sembrare disegnate con l'inchiostro, ad es. B. Diffusione Inkpunk realizzata. Ciascun modello ha una dimensione di diversi gigabyte. Dopo aver scaricato e decompresso, inseriscili Macintosh HD/Utenti/[nome]/Documenti/MochiDiffusion/modelli.

A partire da ora, ci sono 38 modelli che puoi scaricare per diversi stili di intelligenza artificiale e implementarli in Mochi Diffusion. Tuttavia, ogni modello occupa diversi gigabyte di spazio di archiviazione sul disco rigido.
A partire da ora, ci sono 38 modelli che puoi scaricare per diversi stili di intelligenza artificiale e implementarli in Mochi Diffusion. Tuttavia, ogni modello occupa diversi gigabyte di spazio di archiviazione sul disco rigido.

Diffusori - Più semplici, ma anche abbastanza buoni

Sebbene mi piaccia principalmente Mochi Diffusion, ho installato anche altre app per creare arte AI. I diffusori sono uno di questi. Viene fornito con vari modelli di "Diffusione stabile" e può anche essere alimentato con prompt (descrizioni dell'immagine) e prompt negativi (contenuto che non dovrebbe apparire nell'immagine). È possibile definire fino a 150 fasi di lavoro, ma nessuna intensità AI. Tutto sommato, è un'app simile, ma con meno opzioni di personalizzazione. Tuttavia, è utile per i primi passi, soprattutto perché può anche essere scaricato e utilizzato gratuitamente.

Diffusers è anche una buona app per creare arte AI su macOS. Sono già incluse diverse versioni "Stable Diffusion". Decisamente adatto per i primi passi e oltre.
Diffusers è anche una buona app per creare arte AI su macOS. Sono già incluse diverse versioni "Stable Diffusion". Decisamente adatto per i primi passi e oltre.

Download del diffusore

I diffusori non hanno bisogno di un viaggio su GitHub e altri siti Web, e nemmeno loro terminal-Ingressi. Perché questa app è offerta nel Mac App Store. Con questo link vieni direttamente all'offerta. Lì troverai anche le prime immagini di esempio, incluso l'esempio "Labrador nello stile di Vermeer", che viene visualizzato quando apri per la prima volta l'app. Ricorda un po' uno dei dipinti più famosi di Vermeer, La ragazza con l'orecchino di perla. 

AI Photo - L'ordinamento delle immagini come grande punto di forza

Mentre ho avuto buone esperienze con Mochi Diffusion durante la creazione di paesaggi, personaggi fantastici, animali, veicoli e scene di fantascienza, l'app AI Photo mi ha convinto con una cosa completamente diversa: ordinare le immagini create. Oltre a una panoramica "Tutte le immagini", ci sono varie "Collezioni" che puoi espandere con le tue cartelle come desideri. Dai gatti all'architettura alle trame, tutto può essere organizzato e trovato rapidamente qui. C'è anche una funzione di ricerca e puoi contrassegnare i preferiti. Quindi, se lavori con grandi quantità di immagini AI, dovresti provare AI Photo.

La forza di AI Photo, oltre a creare immagini in un'ampia varietà di stili, risiede nell'ordinamento delle varie immagini. Questi vengono salvati nell'app e non vengono persi quando viene chiusa (come nel caso di Mochi Diffusion, ad esempio, se non si salvano le immagini manualmente).
La forza di AI Photo, oltre a creare immagini in un'ampia varietà di stili, risiede nell'ordinamento delle varie immagini. Questi vengono salvati nell'app e non vengono persi quando viene chiusa (come nel caso di Mochi Diffusion, ad esempio, se non si salvano le immagini manualmente).

Download di foto AI

AI Photo può anche essere facilmente scaricato dal Mac App Store ufficiale – Proprio in questo modo. Quindi non devi cercare la versione giusta su GitHub o utilizzare il terminale per qualsiasi script. E con questo programma escono anche immagini utili. Naturalmente, devi anche giocare un po' qui e perfezionare le specifiche di volta in volta per ottenere esattamente l'immagine che desideri. Ma cosa devi tenere in generale e cosa devi descrivere in dettaglio, lo impari nel tempo. È necessaria un po' di pazienza.

Invoke AI: l'installazione più complicata di tutte

Apprezzo la comunità degli sviluppatori e adoro GitHub, il software open source fornito altrove e le offerte di app gratuite oltre a questo. Ma puoi anche rendere l'installazione inutilmente complicata. A volte la (facilità di) installazione e utilizzo dell'applicazione sviluppata non sembra essere importante quanto la fattibilità del progetto. Almeno è così che mi sento riguardo a Invoke AI. Ho provato il download di GitHub (essere trovato qui) con il istruzioni da questa pagina da implementare tramite il terminale. Ma non ha funzionato a causa di alcuni errori Python o qualcosa del genere. 

?

Devo ammettere che non mi sono soffermato a lungo qui con la soluzione dell'errore. Dopo che un secondo tentativo non ha funzionato, ho rimandato a tempo indeterminato il test di Invoke AI. Tuttavia, se sei riuscito a installare correttamente l'app e hai notato vantaggi speciali (soprattutto rispetto alle altre app qui presentate), lascia un commento. Sono davvero entusiasta di vedere cosa può fare il programma e se è riuscito a convincerti. Personalmente, al momento mi sento rafforzato nel mio desiderio che gli sviluppatori pensino all'utente normale e rendano l'installazione del software il più semplice possibile.

Ti è piaciuto l'articolo e le istruzioni sul blog ti hanno aiutato? Allora sarei felice se tu il blog tramite un'iscrizione stabile o a Patreon sosterrebbe.

8 pensieri su "Creare arte AI a livello locale: app per una diffusione stabile e altri modelli di deep learning"

  1. Beatrice Willius

    Ho scaricato un'app come questa qualche mese fa. Ma non ricordo quali. Era troppo lento per il mio Air. Il risultato assomigliava a grumi poco attraenti. Ho provato solo cose molto semplici come "gatto siamese".

    La programmazione è solo più difficile se si suppone che anche altre persone utilizzino il programma. Queste app sembrano tutte molto immature.

    Se manca il comando python3, l'intero python of https://www.python.org/downloads/ . E dopo, i percorsi dovranno probabilmente essere aggiustati. Non mi piace affatto.

    Ho anche controllato un server discord. Ma in qualche modo non potevo farci niente.

    1. Ciao Beatrice,

      Sì, la maggior parte delle volte devi rendere le voci un po' più dettagliate e provare determinati termini e limitazioni. Gli esempi di immagini per questo articolo sono stati forse scelti in modo poco attraente. Tuttavia, le app possono produrre cose abbastanza rispettabili. Aggiungo qualche altra immagine per renderlo più chiaro. Oppure crea un nuovo post sui prompt.

      Definirei le app "semplici" piuttosto che "immature". Se vuoi muovere i primi passi nell'arte dell'intelligenza artificiale, allora sono abbastanza utili - almeno questa è la mia osservazione finora.

      Sì, non volevo sperimentare con Python e simili. Nel terminale, che doveva essere utilizzato per l'installazione, è stato anche mostrato che avrei avuto bisogno di Xcode. Ma perché dovrei assemblare l'app da solo (o farla assemblare utilizzando uno script) quando potresti anche offrirla pronta per il download? Non ha davvero senso per me.

      La discordia è un altro argomento. Non ha davvero nulla a che fare con l'intelligenza artificiale, tranne forse in termini di robot. Comunque, mi piace Discord.

      Cordiali saluti
      Johannes

      1. Beatrice Willius

        Creare un'app è un lavoro. Con Xojo, premo un pulsante. In Python, è molto più complicato. Quindi il programma deve essere firmato e autenticato, il che richiede più lavoro.

        Mi sono iscritto a qualcosa di AI (a metà viaggio???). Processo di onboarding assolutamente terribile. E poi ho pensato, posso mettere i miei suggerimenti lì da qualche parte. Ma non l'ho capito affatto e non avevo voglia di lavorarci sopra.

        1. Oh giusto, Midjourney usa Discord. Ora capisco la connessione. L'ho provato mesi fa, ma poi ho preferito aspettare un'applicazione web o un'app per uso locale. E per fortuna ce ne sono parecchi. Avevo già represso l'intero problema di Discord perché utilizzo Discord principalmente per comunicare con altre persone o con determinate comunità, a seconda del server.

          1. Beatrice Willius

            Il mio test mochi è stato persino più veloce dell'app che ho provato qualche mese fa. La cosa si è schiantata duramente dopo pochi minuti. Rottame di metallo!

          2. Interessante. Con il setup citato nell'articolo non ho avuto problemi o crash dell'app.

    2. Quindi sono un grande fan di Midjourney. Quello che ottieni lì per le foto è semplicemente pazzesco. Stavo già usando Midjourney 6 2 mesi fa ed ero così entusiasta, ma l'attuale versione 4 mi ha lasciato senza fiato. Ma l'operazione tramite Discord è solo una cosa in sé. Ma se posso andare d'accordo con esso, anche tutti gli altri dovrebbero essere in grado di farlo. 😊

  2. Una volta ho provato i diffusori sul mio Intel imac. Funziona, calcola a lungo, ma espelle solo le immagini dalla casella di posta indesiderata. In altre parole, non il minimo riferimento ai termini nel prompt.

Scrivi un commento

Il tuo indirizzo e-mail non verrà pubblicato. I campi obbligatori sono contrassegnati con * segnato

Nel blog di Sir Apfelot troverai consigli, istruzioni e recensioni sui prodotti Apple come iPhone, iPad, Apple Watch, AirPods, iMac, Mac Pro, Mac Mini e Mac Studio.

Speciali