文生图和图生图使用指定照片的脸,StableDiffusion部署roop插件无需lora模型

分类:sd使用教程 2789

本文将分享roop插件和相关模型的安装部署以及使用效果展示,之前小站分享过使用StableDiffusion不需要蒙版涂抹操作实现照片的自动AI换脸,但所更换的面孔依旧由AI模型生成,如果要固定某一张人脸则需要训练一个单独的lora模型。

这次分享的roop插件,可以给AI一张特定的人物图片,AI在文生图和图生图中将参照所给图片的人物面孔进行绘图,而本次demo依旧用偶像寡姐的图片来做demo。


第一张文生图、寡姐穿汉服


提示词相关

masterpiece,best quality,(High Detail),Detailed,(8k wallpaper),(realistic:1.2),
a girl,pond, lotus, willow, (green dress, white top), round neck,smile,
,,(hanfu, ming style outfits, black short coat, yellow with white mamian skirt, round collar, overlapping collar)
Negative prompt: easynegative,lowres,bad anatomy,bad hands,missing fingers,bad feet,low quality,normal quality,worst quality,cropped,extra digit,fewer digits,jpeg artifacts,signature,username,blurry,watermark,two face,multiple people,nsfw,extra feet
Steps: 20, Sampler: DPM++ 2M Karras, CFG scale: 7, Seed: 2915837342, Size: 512x512, Model hash: fc2511737a, Model: chilloutmix_NiPrunedFp32Fix, Clip skip: 2



Used embeddings: EasyNegative [119b]


第二张图生图、惊奇队长变成寡姐

使用图生图时重绘幅度推荐 0.1


提示词:

1girl 


设置的界面参数如下:



roop插件安装部署如下


1、安装python依赖 

pip install insightface==0.7.3


2、从stable difftusion 扩展管理安装roop , roop插件地址 ,这里访问github可能会出现网络故障

https://github.com/s0md3v/sd-webui-roop.git

3、下载需要的模型,模型地址


https://huggingface.co/henryruhs/roop/resolve/main/inswapper_128.onnx


把inswapper_128.onnx放到sd文件夹的\models\roop下。


4、重启StableDiffusion后,即可在StableDiffusion webui的界面上出现roop插件选项了。




6、使用roop插件,在第一次进行AI换脸的时候,还是会在线下载模型,面部识别模型等,这些模型会下载到电脑的windows用户目录下。

但这里的在线下载也可能会有网络问题,下载失败不会导致文生图出错,只会功能失效。







本文由stable diffusion在线绘画 aigj8.com 分享,转载请注明出处。

本文网址:https://www.aigj8.com/stablediffusion/250.html