SD pode finalmente colocar fotos! Controlnet novo processador ip-adaptador

Fonte: Momento AI

Recentemente, depois que o SD de todos foi atualizado para a versão 1.6, seu processador controlnet possui vários outros pré-processadores, então apresentarei a vocês as funções desses pré-processadores, uma por uma. O que eu gostaria de apresentar a vocês hoje é o adaptador IP. Simplificando, é uma função de preenchimento de imagens. Fazemos upload de uma imagem para o controlnet e, através deste pré-processador, nossa imagem será gerada com base na imagem carregada, o que equivale à função mj.Mat. A seguir explicarei esse pré-processador em detalhes.

Etapa 1: Baixe o pré-processador

1. Embora você tenha esse pré-processador, ainda falta esse arquivo, então é necessário fazer o download do pré-processador.

2. Eu carreguei no Baidu Netdisk aqui, você pode baixá-lo sozinho.

Código de extração: aqzk

aqzk

Código de descompressão: nenhum

3. Depois que todos baixarem, coloque em H:\SD\sd-webui-aki\sd-webui-aki-v4.2\sd-webui-aki-v4.2\extensions\sd-webui-controlnet\annotator \Transferências.

Etapa 2: Como usar

1. Vamos primeiro criar uma imagem aleatória, por exemplo, eu criei esta imagem aqui.

02. Aqui abrimos o controlnet e carregamos esta foto.

04. Nosso pré-processador e modelo seguem-me para escolher.

Existem dois tipos de pré-processadores, um suporta sd1.5 e o outro suporta sdxl. Devido à minha configuração, demonstrarei apenas o sd1.5. Você pode estudar o xl sozinho.

5. Você pode alterar o peso do controle de acordo com o efeito, aqui eu escolho 0,5, e depois clicamos para visualizar.

06. Vamos voltar para a parte da palavra prompt. Entramos um menino. Para o modelo, todos também precisam escolher um modelo adequado. Aqui eu escolho um modelo masculino chocolate.

07. Clicamos em Gerar. (Não se esqueça de sincronizar o tamanho da imagem aqui)

Que tal? Como ele se compara ao pad map do Mj? Acho que é muito bom. Então, podemos aumentar o peso. Aqui eu aumento para 0,7. Vamos clicar em Gerar novamente.

Podemos ver que o estilo está ficando cada vez mais parecido com a imagem original, mas a compreensão dos meninos sobre nossas palavras imediatas é menor, fazendo com que as imagens geradas se pareçam mais com as meninas.

8. Então, o que você acha do efeito aqui? Vou te dar algumas fotos.

Imagem original:

Gerar gráfico:

Pode-se dizer que o efeito ainda é bom, mas ainda há muitas mudanças em alguns detalhes específicos.

Etapa 3: Análise de Princípios

1. Princípio: palavra prompt + imagem controlnet = imagem gerada.

2. Palavra de alerta: Um menino lindo.

Imagem original:

Gerar gráfico.

Ok, por hoje é tudo. Se você estiver interessado, experimente!