wAIpoint
English

Diffusione e generazione di immagini/video

Livello: Avanzato

Cos'è

Un modello di diffusione genera immagini (e ormai video e audio) partendo da puro rumore casuale e togliendolo passo dopo passo finché compare un'immagine. Durante l'addestramento si fa il contrario: immagini vere vengono coperte gradualmente di rumore e la rete impara a disfare un piccolo passo di quel processo. I prompt di testo orientano la pulizia verso ciò che descrivi.

A cosa serve

Creare illustrazioni e foto a partire da una descrizione, modificare parti di un'immagine, estenderla, fare varianti e produrre video. Serve anche per aumentare i dati e per esplorare idee di design. La stessa tecnologia solleva questioni di copyright e di immagini false.

Come si fa

Il processo, passo per passo. Librerie e strumenti cambiano; questi passi restano.

  1. Scegli uno strumento adatto: un servizio online per risultati rapidi, oppure un modello aperto che fai girare tu per avere più controllo.
  2. Scrivi un prompt che indichi soggetto, stile, composizione e luce, e di' cosa evitare.
  3. Genera più immagini con semi (seed) casuali diversi: ogni seed dà un'immagine diversa dallo stesso prompt.
  4. Raffina: cambia una cosa alla volta nel prompt, oppure usa image-to-image o inpainting per modificare solo una parte.
  5. Ingrandisci e correggi i dettagli, come mani e testi, che questi modelli sbagliano spesso.
  6. Controlla la licenza e le regole della piattaforma prima di pubblicare, ed etichetta onestamente le immagini generate.

Novità

Cronologia

  1. 2020Denoising diffusion probabilistic model: sintesi di immagini di alta qualità con i modelli di diffusione (Ho et al.). fonte

Fonti