¡SD finalmente puede colocar imágenes! Controlnet nuevo procesador adaptador ip

Fuente: Momento AI

Recientemente, después de que la SD de todos se actualizó a la versión 1.6, su procesador controlnet tiene varios preprocesadores más, luego les presentaré las funciones de estos preprocesadores una por una. Lo que me gustaría presentarles hoy es el adaptador IP. En pocas palabras, es una función de relleno de imágenes. Subimos una imagen a controlnet y luego, a través de este preprocesador, nuestra imagen se generará en función de la imagen cargada, lo que es equivalente a la función mj.Mat. A continuación les explicaré este preprocesador en detalle.

Paso 1: descargar el preprocesador

1. Aunque tienes este preprocesador, todavía te falta este archivo, por lo que necesitas descargar el preprocesador.

2. Lo he subido a Baidu Netdisk aquí, puedes descargarlo tú mismo.

Código de extracción: aqzk

aqzk

Código de descompresión: ninguno

3. Después de que todos lo descarguen, colóquelo en H:\SD\sd-webui-aki\sd-webui-aki-v4.2\sd-webui-aki-v4.2\extensions\sd-webui-controlnet\annotator \descargas.

Paso 2: Cómo utilizar

1. Primero creemos una imagen aleatoria. Por ejemplo, creé esta imagen aquí.

02. Aquí abrimos controlnet y subimos esta imagen.

04. Nuestro preprocesador y modelo síganme para elegir.

Hay dos tipos de preprocesadores, uno soporta sd1.5 y el otro soporta sdxl. Debido a mi configuración, solo demostraré el sd1.5. Puedes estudiar el xl tú mismo.

5. Puedes cambiar el peso del control según el efecto, aquí elijo 0.5 y luego hacemos clic para obtener una vista previa.

06. Volvamos a la parte de la palabra clave. Ingresamos un niño. Para el modelo, todos también deben elegir un modelo adecuado. Aquí elijo un modelo masculino de chocolate.

07. Damos clic en Generar. (No olvides sincronizar el tamaño de la imagen aquí)

¿Qué te parece? ¿Cómo se compara con el mapa de almohadillas de Mj? Creo que es bastante bueno. Así que también podríamos aumentar un poco el peso. Aquí lo elevo a 0,7 y hacemos clic en Generar nuevamente.

Podemos ver que el estilo se parece cada vez más a la imagen original, pero la comprensión de los niños de nuestras palabras clave es menor, lo que hace que las imágenes generadas se parezcan más a las niñas.

8. Entonces, ¿cómo te sientes con el efecto aquí? Te daré algunas fotos.

Imagen original:

Generar gráfico:

Se puede decir que el efecto sigue siendo bueno, pero todavía hay muchos cambios en algunos detalles específicos.

Paso 3: Análisis de principios

1. Principio: palabra rápida + imagen de controlnet = imagen generada.

2. Palabra rápida: Un chico guapo.

Imagen original:

Generar gráfico.

Bien, eso es todo por hoy. Si estás interesado, ¡pruébalo!