Stable Diffusion使用ControlNet:IP-Adapter实现图片风格迁移

Stable Diffusion使用ControlNet:IP-Adapter实现图片风格迁移

    正在检查是否收录...

IP-Adapter 全称是 Text Compatible Image Prompt Adapter for Text-to-Image Diffusion Models(文本到图像扩散模型的文本兼容图像提示适配器),是腾讯研究院出品的一个新的ControlNet模型,旨在使预训练的文本到图像扩散模型能够生成具有图像提示的图像。

IP-Adapter是一种有效的轻量级适配器,用于实现预训练文本到图像扩散模型的图像提示能力。

IP-Adapter实现图片风格迁移示例

1、选择文生图

2、设置ControlNet unit 0的参数

添加一张图片作为参考风格。

Control Type:选择IP-Adapter Preprocessor:选择ip-adapter_clip_sd15 Model:选择ip-adapter_sd15_plus Control Weight:设置为1。

3、设置ControlNet unit 1的参数

这里选择Depth控制图片的结构,也可以使用lineart、canny、softedge等线条类模型。

Control Type:选择Depth Preprocessor:选择depth_midas Model:选择control_v11f1p_sd15_depth Control Weight:设置为1。

4、文生图参数设置

采样方式:选择DPM++ 2M Karras 迭代步数:设置为20 高度和宽度与ControlNet unit 1上传的图片保持一致

效果展示

Depth​​​​​ Lineart Canny SoftEdge

controlnetunit扩散模型文本到图像图像提示图像扩散模型文生图预训练适配器prompt风格迁移cli轻量级diffusionclip
  • 本文作者:WAP站长网
  • 本文链接: https://wapzz.net/post-16264.html
  • 版权声明:本博客所有文章除特别声明外,均默认采用 CC BY-NC-SA 4.0 许可协议。
本站部分内容来源于网络转载,仅供学习交流使用。如涉及版权问题,请及时联系我们,我们将第一时间处理。
文章很赞!支持一下吧 还没有人为TA充电
为TA充电
还没有人为TA充电
0
0
  • 支付宝打赏
    支付宝扫一扫
  • 微信打赏
    微信扫一扫
感谢支持
文章很赞!支持一下吧
关于作者
2.8W+
9
1
2
WAP站长官方

【推理框架】超详细!AIGC面试系列 大模型推理系列(1)

上一篇

小狗伪原创:智能写作的先锋,内容创作的未来

下一篇
  • 复制图片
按住ctrl可打开默认菜单