diffusers scheduler add_noise前向加噪可视化

发布时间:2024年01月11日

参考:
http://www.bryh.cn/a/604194.html

1、diffusers Pipeline使用

import torch
from diffusers import PixArtAlphaPipeline

pipe = PixArtAlphaPipeline.from_pretrained("PixArt-alpha/PixArt-XL-2-1024-MS", torch_dtype=torch.float16)
pipe = pipe.to('cuda')

prompt = "A alpaca made of colorful building blocks, cyberpunk"
image = pipe(prompt, num_inference_steps=30).images[0]

image

image.save("./catcus.png") ##保存图片

在这里插入图片描述

2、scheduler模块

noise_scheduler = pipe.scheduler
noise_scheduler

看到PixArtAlpha模型前向加噪声beta 是0.0001到0.02,是linear线性改变
beta_start、beta_end和beta_schedule 3个参数来控制噪声调度器的超参数beta。

beta_start为控制推理阶段开始的beta值
beta_end为控制beta的最终值
beta_schedule可以通过一个函数映射来为模

文章来源:https://blog.csdn.net/weixin_42357472/article/details/135515495
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。