diffusers

【diffusers极速入门（四）】EMA 操作是什么？

系列文章目录【diffusers极速入门（一）】pipeline实际调用的是什么？call方法!【diffusers极速入门（二）】如何得到扩散去噪的中间结果？
多恩Stone·2025-01-26 18:52

【diffusers极速入门（六）】缓存梯度和自动放缩学习率以及代码详解

系列文章目录【diffusers极速入门（一）】pipeline实际调用的是什么？call方法!【diffusers极速入门（二）】如何得到扩散去噪的中间结果？
多恩Stone·2025-01-26 18:52

stable-cascade 文生图模型diffusers使用案例

stable-cascade-prior与stabilityai/stable-cascadediffusers版本也要指定安装：pipinstallgit+https://github.com/kashif/diffusers.git
loong_XL·2024-02-20 07:11

记录在Mac上安装safetensors时遇到的问题

因为要安装huggingface上的Diffusers，所以安装了一系列的东西，前面的Xcode，git安装的都比较顺利，到安装safetensors时出现了问题…问题1:没有安装Rustcompiler
m0_50277087·2024-02-12 12:45

全世界 LoRA 训练脚本，联合起来!

你可以在diffusers上找到我们使用的训练脚本，或是直接在Colab上试着运行一
·2024-02-11 18:48

diffusers单机多卡推理（全网首发）

起因博主在部署InstantID项目时，显存不够，想要将模型分散在多张卡上。翻到这篇发现是分布式推理，博主一直以为这个可以达到我想要的效果，但是效果是多线程并行推理，并不能将一个模型切片在多个GPU上。DistributedInferencewithAccelerate好运的是在Accelerate说明文档中我找到了下面的文章，使用init_empty_weights在加载模型时不加载权重，loa
半度、·2024-02-09 15:44

全世界 LoRA 训练脚本，联合起来!

你可以在diffusers上找到我们使用的训练脚本，或是直接在Colab上试着运行一下。如果你想跳过技术讲解直接上手，可以使用这个HuggingFaceSpa
工业甲酰苯胺·2024-02-07 06:28

diffusers代码梳理总结

常用类这里总结一些频繁用到的支持类。fromdataclassesimportdataclassfrom..utilsimportBaseOutputfromcollectionsimportOrderedDictclassBaseOutput(OrderedDict):...@dataclassclassUnet2DOutput(BaseOutput):"""Theoutputof[`Unet2
平丘月初·2024-02-05 03:10

stable diffusion微调总结

stablediffusion模型类别：SDSD2SDXLSDXLLCM（潜在一致性模型）SDXLDistilledSDXLTurbo安装accelerate通过pip安装配置accelerateconfig查看配置安装diffusers
江小皮不皮·2024-02-03 14:46

【AIGC】Diffusers：AutoPipeline自动化扩散生图管道

前言扩散器能够完成许多不同的任务，并且您通常可以将相同的预训练权重用于多个任务，例如文本到图像、图像到图像和修复。但是，如果您不熟悉库和扩散模型，可能很难知道将哪个管道用于任务。例如，如果您将runwayml/stable-diffusion-v1-5模型用于文本到图像，您可能不知道也可以通过分别使用StableDiffusionImg2ImgPipeline和StableDiffusionInp
资料加载中·2024-01-29 14:22

【AIGC】Diffusers:加载管道、模型和调度程序

前言拥有一种使用扩散系统进行推理的简单方法对于扩散器至关重要。扩散系统通常由多个组件组成，例如参数化模型、分词器和调度器，它们以复杂的方式进行交互。这就是为什么我们设计了DiffusionPipeline，将整个扩散系统的复杂性包装成一个易于使用的API，同时保持足够的灵活性以适应其他用例，例如将每个组件单独加载为构建块以组装您自己的扩散系统。推理或训练所需的一切都可以通过该from_pretra
资料加载中·2024-01-29 10:46

【AIGC】Diffusers:训练扩散模型

前言无条件图像生成是扩散模型的一种流行应用，它生成的图像看起来像用于训练的数据集中的图像。通常，通过在特定数据集上微调预训练模型来获得最佳结果。你可以在HUB找到很多这样的模型，但如果你找不到你喜欢的模型，你可以随时训练自己的模型！本教程将教您如何在SmithsonianButterflies数据集的子集上从头开始训练UNet2DModel以生成您自己的蝴蝶。本培训教程基于“扩散器训练”笔记本。有
资料加载中·2024-01-26 10:46

【AIGC】Diffusers:扩散模型的开发手册说明1

主要组件最先进的扩散管道diffusionpipelines，只需几行代码即可进行推理。可交替使用的各种噪声调度器noiseschedulers，用于平衡生成速度和质量。预训练模型models，可作为构建模块，并与调度程序结合使用，来创建您自己的端到端扩散系统。开始学习一个快速的推理程序fromdiffusersimportDDPMPipelineddpm=DDPMPipeline.from_pr
资料加载中·2024-01-25 20:30

【AIGC】Diffusers:扩散模型的开发手册说明2

前言扩散器被设计成一个用户友好且灵活的工具箱，用于构建适合您用例的扩散系统。工具箱的核心是模型和调度程序。然而DiffusionPipeline为方便起见将这些组件捆绑在一起，但您也可以解包管道并分别使用模型和调度程序来创建新的扩散系统。解构StableDiffusion流水线稳定扩散是一种文本到图像的潜在扩散模型。它被称为潜在扩散模型，因为它使用图像的低维表示而不是实际的像素空间，这使得它更节省
资料加载中·2024-01-25 20:26

【从零到一AIGC源码解析系列1】文本生成图片Stable Diffusion的diffusers实现

目录1.如何使用StableDiffusionPipeline1.1环境配置1.2StableDiffusionPipeline1.3生成非正方形图像2.如何使用diffusers构造自己的推理管线关注公众号
AI杰克王·2024-01-21 20:39

K-【学习Diffusers 四】 读取模型参数 bin格式、safetensors格式

该操作多用于推理safetensors格式的参数读取方法1拿到pipeline中的unet的办法unet=pipeline.pipe.unet2safetensors格式文件的参数读取方法state_dict=safetensors.torch.load_file(args.model_id,device="cpu")unet.load_state_dict(state_dict)#读入模型3ar
计算机视觉-Archer·2024-01-14 13:14

【扩散模型】11、Stable Diffusion | 使用 Diffusers 库来看看 Stable Diffusion 的结构

文章目录一、什么是StableDiffusion二、Diffusers库三、微调、引导、条件生成3.1微调3.2引导3.3条件生成四、StableDiffusion4.1以文本为条件生成4.2无分类器的引导
呆呆的猫·2024-01-12 01:13

diffusers flask streamlit 简洁可视化文生图页面

参考：https://python-bloggers.com/2022/12/stable-diffusion-application-with-streamlit/https://github.com/LowinLi/stable-diffusion-streamlit项目结构本项目很简洁，暂时每次只能返回一张图片；gpu资源T416g；测试下来基本也只能支持同时一个人使用flask：作为后端，
loong_XL·2024-01-11 18:02

diffusers scheduler add_noise前向加噪可视化

参考：http://www.bryh.cn/a/604194.html1、diffusersPipeline使用importtorchfromdiffusersimportPixArtAlphaPipelinepipe=PixArtAlphaPipeline.from_pretrained("PixArt-alpha/PixArt-XL-2-1024-MS",torch_dtype=torch.f
loong_XL·2024-01-11 18:01

diffusers 文成图AIGC常见pipeline参数介绍

参考：https://blog.csdn.net/m0_54105644/article/details/134290762Diffusers是用于生成图像，音频甚至分子3D结构的最先进的扩散模型的首选库
loong_XL·2024-01-11 18:01

使用 Docker 和 Diffusers 快速上手 Stable Video Diffusion 图生视频大模型

本篇文章聊聊，如何快速上手StableVideoDiffusion(SVD)图生视频大模型。写在前面月底计划在机器之心的“AI技术论坛”做关于使用开源模型“StableDiffusion模型”做有趣视频的实战分享。因为会议分享时间有限，和之前一样，比较简单的部分，就用博客文章的形式来做补充分享吧。本篇是一篇相关的补充内容，主要聊聊使用开源行业标杆stability.ai出品的StableVideo
soulteary·2024-01-11 18:26

【深度学习】SDXL tensorRT 推理，Stable Diffusion 转onnx，转TensorRT

文章目录sdxl转diffusers转onnx转TensorRTsdxl转diffusersdefconvert_sdxl_to_diffusers(pretrained_ckpt_path,output_diffusers_path
XD742971636·2024-01-09 23:48

diffusers笔记

#https://github.com/huggingface/diffusers#pipinstalltorchtorchvisiontorchaudio--index-urlhttps://download.pytorch.org
pyc_666666·2024-01-08 16:00

谷歌colab测试diffusers

pipinstall--upgradediffusersfromdiffusersimportDiffusionPipelineimporttorchpipeline=DiffusionPipeline.from_pretrained("runwayml/stable-diffusion-v1-5",torch_dtype=torch.float32)pipeline("Animageofasqu
pyc_666666·2024-01-08 16:59

diffusers加速文生图速度；stable-diffusion、PixArt-α

参考：https://pytorch.org/blog/accelerating-generative-ai-3/https://colab.research.google.com/drive/1jZ5UZXk7tcpTfVwnX33dDuefNMcnW9ME?usp=sharing#scrollTo=jueYhY5YMe22大概GPU资源8G-16G；另外模型资源下载慢可以在国内镜像：https
loong_XL·2024-01-06 23:15

diffusers-训练自己的模型

一、搭建dataset基于datasets这个库创建的dataloader，底层代码还待探索二、修改模型结构（非必要）尽量可以利用已有的预训练权重去训练模型，但是权重并不一定能够完全是适配，所以还需要自己来视情况做修改，未能加载预训练权重的那一部分参数必须要重新开始训练，不存在finetune一说三、无条件样本生成先搭建环境train_unconditional.py这个代码待细看train_un
qq_45692660·2023-12-21 08:06

【复现】AnimateDiff ControlNet Pipeline复现过程记录

code：diffusers/examples/communityatmain·huggingface/diffusers·GitHub似乎不用全下载，目前只用到了pipeline_animatediff_controlnet.py
李加号pluuuus·2023-12-21 02:37

diffusers-Image-to-image

importtorchfromdiffusersimportAutoPipelineForImage2Imagefromdiffusers.utilsimportmake_image_grid,load_imagepipeline=AutoPipelineForImage2Image.from_pretrained("runwayml/stable-diffusion-v1-5",torch_dt
qq_45692660·2023-12-19 00:17

ValueError: --caption_column‘ value ‘text‘ needs to be one of: image

使用diffusers在自己的数据集上进行训练报错，刚开始以为是自己的数据集格式不对，尝试了huggingface（datasets-image_load）中的各种数据格式都不行，网上搜索一圈，也没找到好的解决办法
惊瑟·2023-12-19 00:16

diffusers-Text-to-image

fromdiffusersimportControlNetModel,AutoPipelineForText2Imagefromdiffusers.utilsimportload_imageimporttorchcontrolnet=ControlNetModel.from_pretrained("lllyasviel/control_v11p_sd15_openpose",torch_dtype
qq_45692660·2023-12-19 00:44

diffusers-load adapters

一、DreamBooth（待补充）二、Textualinversion（待补充）三、LorafromdiffusersimportAutoPipelineForText2Imageimporttorchpipeline=AutoPipelineForText2Image.from_pretrained("stabilityai/stable-diffusion-xl-base-1.0",torch
qq_45692660·2023-12-18 00:59

diffusers中blip描述使用详解

1blip细节2blip读取代码if__name__=='__main__':args=parse_args()blix_list=[]img_list=[]forfile_nameinos.listdir(args.dataset_dir):iffile_name.endswith(".txt"):continueimg_list.append(file_name)ifargs.blip_typ
计算机视觉-Archer·2023-12-16 15:09

diffusers pipeline拆解：理解pipelines、models和schedulers

diffuserspipeline拆解：理解pipelines、models和schedulers翻译自：https://huggingface.co/docs/diffusers/using-diffusers
Adenialzz·2023-12-15 22:56

扩散模型实战（十四）：扩散模型生成音频

基本原理介绍扩散模型实战（二）：扩散模型的发展扩散模型实战（三）：扩散模型的应用扩散模型实战（四）：从零构建扩散模型扩散模型实战（五）：采样过程扩散模型实战（六）：DiffusersDDPM初探扩散模型实战（七）：Diffusers
wshzd·2023-12-05 21:05

扩散模型实战（十二）：使用调度器DDIM反转来优化图像编辑

基本原理介绍扩散模型实战（二）：扩散模型的发展扩散模型实战（三）：扩散模型的应用扩散模型实战（四）：从零构建扩散模型扩散模型实战（五）：采样过程扩散模型实战（六）：DiffusersDDPM初探扩散模型实战（七）：Diffusers
wshzd·2023-11-27 11:19

扩散模型实战（十一）：剖析Stable Diffusion Pipeline各个组件

基本原理介绍扩散模型实战（二）：扩散模型的发展扩散模型实战（三）：扩散模型的应用扩散模型实战（四）：从零构建扩散模型扩散模型实战（五）：采样过程扩散模型实战（六）：DiffusersDDPM初探扩散模型实战（七）：Diffusers
wshzd·2023-11-22 21:03

diffuser踩坑记录

1.最稳定的版本：diffusers==0.8.0，不然一堆奇奇怪怪的错误2.可以从单个权重文件加载SD，这样就不用下载一大堆了StableDiffusionPipeline.from_single_file
Yuezero_·2023-11-22 06:40

扩散模型实战（十）：Stable Diffusion文本条件生成图像大模型

基本原理介绍扩散模型实战（二）：扩散模型的发展扩散模型实战（三）：扩散模型的应用扩散模型实战（四）：从零构建扩散模型扩散模型实战（五）：采样过程扩散模型实战（六）：DiffusersDDPM初探扩散模型实战（七）：Diffusers
wshzd·2023-11-20 01:21

stable diffusion到底是如何工作的

在这篇文章中，我们想展示如何将StableDiffusion与Diffusers库一起使用，解释模型的工作原理，最后更
资料加载中·2023-11-17 08:30

利用 OpenVINO™ 部署 HuggingFace 预训练模型的方法与技巧

通过HuggingFace开源的Transformers,Diffusers库，只需要要调用少量接口函数，入门开发者也可以
英特尔开发人员专区·2023-11-15 22:36

【diffusers】(二) scheduler介绍 & 代码解析

ok接下来我们继续介绍diffusers中的模块，最重要的我觉得一定是scheduler，因为它这里面包含了扩散模型的基本原理，通过对代码的分析我们可以对论文中的公式有着更好的理解，同时scheduler
Lcm_Tech·2023-11-12 09:36

【diffusers】(一) diffusers库介绍 & 框架代码解析

1.简介说到现在最常用的stablediffusion代码，那肯定莫过于stable-diffusion-webui了，它的快捷安装、可视化界面、extension模块等等功能都拓展了使用人群。虽然在大多数情况下webui都有很好的适用性，但是在某些特殊需求或者应用场景下，我们需要对模型部分结构进行修改（比如把condition模块从文字换成图像，甚至是点云、图表、图结构等数据形式），这时修改模型
Lcm_Tech·2023-11-12 09:06

diffusers库中stable Diffusion模块的解析

diffusers库中stableDiffusion模块的解析diffusers中，stableDiffusionv1.5主要由以下几个部分组成Out[3]:dict_keys(['vae','text_encoder
littletomatodonkey·2023-11-12 09:36

hugging face下载数据集

开始直接执行这个，下载下来的图片打不开gitclonehttps://huggingface.co/datasets/diffusers/dog-example解决办法：安装gitlfs1.curl-shttps
wu_jiacheng·2023-11-08 02:13

Transformers使用教程

模型参数下载数据集查找Transformers中文使用说明Huggingface超详细介绍-知乎HuggingFace的Transformers库快速入门文档说明Transformers提供文本相关的预训练模型Diffusers
来路与归途·2023-11-05 09:03

diffusers-Tasks

https://huggingface.co/docs/diffusers/using-diffusers/unconditional_image_generationhttps://huggingface.co
Kun Li·2023-11-05 08:57

diffusers-Load pipelines,models,and schedulers

https://huggingface.co/docs/diffusers/using-diffusers/loadinghttps://huggingface.co/docs/diffusers/using-diffusers
Kun Li·2023-11-03 03:30

diffusers-Load adapters

https://huggingface.co/docs/diffusers/main/en/using-diffusers/loading_adaptershttps://huggingface.co/
Kun Li·2023-11-02 12:43

02_diffusion_models_from_scratch_CN

我们将学习损坏过程（向数据添加噪声）什么是UNet，以及如何从零开始实现一个极小的UNet扩散模型训练抽样理论然后，我们将比较我们的版本与diffusers库中的DDPM实现的区别对小型UNet的改进
Mr_yuekitty·2023-10-21 07:10

01_introduction_to_diffusers_CN

Diffusers介绍来源：https://github.com/huggingface/diffusion-models-class/blob/main/unit1/01_introduction_to_diffusers.ipynb
Mr_yuekitty·2023-10-21 07:08
上一页 1 2 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他