SDXL Turbo

SDXL Turbo

Stability AI · Imagem

O SDXL Turbo é um modelo de imagem em tempo real da Stability AI que transforma um texto em imagem em um único passo, trocando resolução por geração quase instantânea.

Prévia da interface de SDXL Turbo

Sobre SDXL Turbo

What Is SDXL Turbo

O SDXL Turbo é um modelo de imagem IA de texto para imagem que a Stability AI lançou no fim de novembro de 2023. Trata-se de uma versão destilada do SDXL 1.0, feita para gerar imagens na hora, e não depois de uma longa espera. Você entrega um texto e ele responde em uma única passada de rede, e daí vem o nome de gerador de imagens em tempo real.

O modelo existe para resolver um problema específico: a velocidade. Os modelos de difusão comuns percorrem dezenas de passos antes de mostrar uma imagem. O SDXL Turbo se apoia em um método de treinamento chamado destilação de difusão adversarial, ou ADD, que comprime esse processo para um a quatro passos. Segundo a Stability AI, em uma GPU A100 o modelo produz uma imagem de 512x512 em cerca de 207 milissegundos.

A troca aparece no resultado. O SDXL Turbo trabalha em uma resolução fixa de 512x512, então detalhes finos, como mãos e rostos, podem sair toscos, e forçar uma tela maior costuma bagunçar o enquadramento. O lançamento original veio sob uma licença de pesquisa não comercial, e hoje o modelo pode rodar localmente ou por ferramentas hospedadas que o integram.

Getting Started

  1. Acesse a página do modelo no Hugging Face e revise a licença antes de baixá-lo.
  2. Baixe os pesos com a biblioteca Diffusers, ou abra um espaço hospedado se preferir pular a instalação.
  3. Carregue o modelo e defina o número de passos em um ou dois para a resposta mais rápida, ou até quatro se quiser mais detalhe.
  4. Escreva um texto em inglês e gere: a imagem aparece quase no ritmo da sua digitação.
  5. Ajuste o texto, palavra por palavra, até o enquadramento chegar perto do que você imaginou.

Informações do produto

Uma visão rápida dos preços, das plataformas compatíveis e do desempenho de SDXL Turbo.

Plano gratuitoSim
Planos pagos$0 - $0
PlataformaWeb, API, self-hosted, Hugging Face, ComfyUI
DesenvolvedorStability AI
CategoriaImagem
Data de lançamentoNov 2023
Última atualizaçãoDec 2023
Visitas ao site36.8K
Ranking global do site955K
Disponibilidade da APISim

Ideal para

Os usuários, tarefas e cenários em que esta ferramenta se encaixa melhor.

Usuários

  • Quem gosta de testar textos
  • Entusiastas com GPU modesta
  • Desenvolvedores que testam recursos

Tarefas

  • Rascunhar ideias na hora
  • Testar a redação de um texto
  • Montar demos interativas
  • Gerar variações rápidas

Cenários

  • Um designer que explora composição
  • Um estudante que aprende modelos de difusão
  • Alguém que adiciona recursos de imagem a um app

Principais recursos

Geração de imagem em um único passo

O SDXL Turbo transforma um texto em uma imagem pronta em uma única passada de rede, uma abordagem de texto para imagem em um passo que o separa dos modelos que precisam de dezenas. É um motor de geração rápida de imagens por projeto, e a recompensa é uma latência baixa o bastante para parecer ao vivo. Nada no processo espera uma barra de progresso.

Destilação de difusão adversarial

O modelo é treinado com um método chamado ADD, que combina uma perda de destilação com uma perda adversarial. Em miúdos, ele aprende a imitar um modelo professor maior enquanto uma segunda rede o empurra para resultados mais nítidos. É assim que ele chega a uma imagem limpa com tão poucos passos.

Interação em tempo real

Como cada passada é tão rápida, a imagem se atualiza enquanto você digita. Você adiciona uma palavra e a cena muda, apaga outra e ela volta ao lugar. Isso transforma a criação de imagens em um ciclo vivo, e não em um comando único.

Pegada de hardware enxuta

O modelo destilado é bem mais leve que o SDXL 1.0, então roda em GPU de consumo e até em instâncias de nuvem modestas. Você não precisa de uma placa de data center para testá-lo, e isso coloca a geração em tempo real ao alcance de criadores individuais.

Suporte a imagem para imagem

Além dos textos, o modelo cobre o trabalho de imagem para imagem com o mesmo fluxo. Você pode passar uma imagem de referência e reformar seu estilo mantendo a resposta rápida. Serve para reestilizar e para ajustes velozes, não só para gerações novas.

Prós e contras

Prós

  • Gera imagens em um único passo, então a resposta parece instantânea.
  • Roda em GPU de consumo, o que mantém a exigência de hardware baixa.
  • Os pesos abertos deixam você inspecionar e rodar o modelo na sua própria máquina.
  • Cobre texto para imagem e imagem para imagem com um só fluxo.
  • Os espaços hospedados facilitam testar antes de instalar qualquer coisa.

Contras

  • O resultado fica em 512x512, então detalhes finos, como mãos e rostos, podem sair toscos.
  • Forçar mais resolução costuma bagunçar a imagem, o que limita o uso.
  • A licença original de pesquisa proibia o uso comercial, então revise os termos antes de publicar qualquer coisa.
  • Poucos passos trocam acabamento por velocidade, e o resultado pode parecer menos refinado que o de um modelo de difusão completo.

Perguntas frequentes

É um modelo de texto para imagem em tempo real para transformar textos escritos em imagens com rapidez. Ele serve para rascunhar ideias, testar textos e alimentar ferramentas em que a imagem precisa aparecer enquanto a pessoa digita.