diffusion 第7页

【shell编程入门】stable diffusion webui的webui.sh脚本解析

前言通过webui.sh，我们可以在linux系统下安装虚拟环境，并启动stablediffusonwebui。脚本实例#!/usr/bin/envbash##################################################Pleasedonotmakeanychangestothisfile,##changethevariablesinwebui-user.shi

资料加载中·2024-01-16 11:03

在 Linux 本地部署 stable diffusion

由于工作站安装的是ubuntu，卡也在上面，就只能在ubuntu上部署安装stablediffusion了。另外，Linux上使用stablediffusion也会方便很多。1准备工作NVIDIA官网下载驱动，主要是为了规避多卡驱动不同的问题。由于本机是两张一样的卡，就可以省去这一步。如果存在不同型号的多卡驱动不兼容的问题，就需要去官网下载。安装python3.10安装CUDA11.8（pytor

哦豁灬·2024-01-16 08:54

云服务器部署Stable Diffusion Webui从0到1总结：反复重启+循环debug

文章目录在学校服务器部署StableDiffusionWebui（一）准备工作（二）环境配置（三）git拉取项目到本地（四）运行项目遇到的问题：（一）使用gitclone时，Failedtoconnectto127.0.0.1port7890（二）使用gitclone时，出现RPCfailed（三）RuntimeError:Couldn’tinstallopen_clip（四）Couldn'tch

丁希希哇·2024-01-16 04:45

音乐生成舞蹈

AI视觉网奇·2024-01-16 03:26

MedSegDiff： Medical Image Segmentation with Diffusion Probabilistic Model

摘要Diffusionprobabilisticmodel(DPM)recentlybecomesoneofthehottesttopicincomputervision.ItsimagegenerationapplicationsuchasImagen,LatentDiffusionModelsandStableDiffusionhaveshownimpressivegenerationcapa

计算机视觉-Archer·2024-01-15 22:41

Stable Diffusion

stablediffusion简单安装简单安装相关软件安装踩坑简单安装废话少说直接开干相关软件安装(安装python的时候切记要手动勾选上??toPath选项，也就是默认安装路径，默认安装在C盘用户目录下，这里用户名建议不要中文，免得后期出问题，虽然我是中文暂时还没问题）git64位安装Python3106安装拉取源代码（自己随便找个目录）gitclonehttps://github.com/AU

chen_179·2024-01-15 19:23

Stable Diffusion这样的文本-图像生成模型有记忆吗？

StableDiffusion扩散模型作为生成高质量图像的先进模型，却伴随着对训练数据的记忆化倾向，引发了隐私和安全性的担忧。AIGCer分享一篇分析该现象的文章，通过两个案例研究深入挖掘了文本复制现象，旨在为未来生成模型的改进提供重要的指导。基于扩散模型，如StableDiffusion模型，以其生成高质量、高分辨率图像的能力，已经在文本到图像合成领域引起了革命。这些进展推动了图像生成和编辑任务

AI生成未来·2024-01-15 13:13

OCD：基于以目标为中心Diffusion的高效视频编辑方法

基于扩散的视频编辑已经取得了令人瞩目的质量，可以根据文本编辑提示转换给定视频输入的全局风格、局部结构和属性。然而，这类解决方案通常需要大量的内存和计算成本来生成时间上连贯的帧，无论是以扩散反演还是跨帧注意力的形式。在本文中，我们对这些低效性进行了分析，并提出了简单而有效的修改，可以在保持质量的同时实现显著的加速。此外，我们引入了Object-CentricDiffusion，简称OCD，通过将计算

AI生成未来·2024-01-15 13:11

Dreambooth Stable Diffusion始化训练环境（AutoDL）

以AutoDL为例以下代码源自：赛博华佗——秋叶：Akegarasu环境选择Miniconda:Miniconda是一个轻量级的Conda环境管理系统。它包含了conda、Python和一些常用的包，以及能够管理安装其他包的能力。Miniconda是Anaconda的一个简化版，Anaconda是一个流行的Python科学计算发行版。conda3:这指的是使用Conda环境管理系统，并且特指Pyt

CCSBRIDGE·2024-01-15 08:51

[SGDiff] A Style Guided Diffusion model for fashion synthesis

Abstract①提出一个风格引导的扩散模型（SGDiff），把图像模态与预训练的t2i模型组合起来。②提出一个数据集SG-Fashion。MethodSGDiffOverview公式含义：在给定时间点t上的输入，目标文本的语义表示，风格表示。通过扩散网络估计该时刻的噪声。输入：①文本text；②风格图像。文本条件通过扩散模型的生成风格条件通过CLIP模型的生成这两个特征在SCA模块中进行特征融合

52Tiramisu·2024-01-14 17:45

Stable Diffusion原理解析-inpaint修复图片

文章目录一、背景知识（一）inpaint概念（二）图生图（img2img）任务二、StableDiffusion中inpaint的两种实现形式（一）开源的inpaint模型：这种方式必须基于一个已经训练好的unet模型（二）基于base模型inpaint一、背景知识（一）inpaint概念inpaint是StableDiffusion仅重绘图像部分的技术，将画面中被手工遮罩的部分重新绘制；Inpa

丁希希哇·2024-01-14 10:21

Stable Diffusion（SD）核心基础知识——（文生图、图生图）

文章目录一、StableDiffusion核心基础原理（一）StableDiffusion模型工作流程（二）StableDiffusion模型核心基础原理（三）StableDiffusion的训练过程（四）其他主流生成式模型二、StableDiffusion核心网络结构（一）SD模型整体架构（二）VAE模型（三）U-Net模型（四）CLIPTextEncoder模型StableDiffusion是

丁希希哇·2024-01-14 10:47

Stable Diffusion XL Turbo 文生图和图生图实践

soulteary·2024-01-14 10:17

Stable Diffusion XL（SDXL）核心基础知识

文章目录一、StableDiffusionXL基本概念二、SDXL模型架构上的优化（一）SDXL的整体架构（二）VAE（三）U-Net（四）textencoder（五）refinermodel三、SDXL在训练上的技巧（一）图像尺寸条件化（二）图像裁剪参数条件（三）多尺度（宽高比）图片训练一、StableDiffusionXL基本概念StableDiffusionXL或SDXL是最新的图像生成模型

丁希希哇·2024-01-14 07:59

stable-diffusion 学习笔记

从效果看StableDiffusion中的采样方法参考：Ai绘图日常篇二：从效果看StableDiffusion中的采样方法_软件应用_什么值得买大概示例：

我的风格0.0·2024-01-14 03:36

用通俗易懂的方式讲解：十分钟读懂 Stable Diffusion 运行原理

AIGC热潮正猛烈地席卷开来，可以说StableDiffusion开源发布把AI图像生成提高了全新高度，特别是ControlNet和T2I-Adapter控制模块的提出进一步提高生成可控性，也在逐渐改变一部分行业的生产模式。惊艳其出色表现，也不禁好奇其背后技术。之前写过一篇实战类的文章一文教会你学会AI绘画利器StableDiffusion本文整理了一些学习过程中记录的技术内容，主要包括Stabl

机器学习社区·2024-01-14 03:32

用通俗易懂的方式讲解：Stable Diffusion WebUI 从零基础到入门

本文主要介绍StableDiffusionWebUI的实际操作方法，涵盖prompt推导、lora模型、vae模型和controlNet应用等内容，并给出了可操作的文生图、图生图实战示例。适合对StableDiffusion感兴趣，但又对StableDiffusionWebUI使用感到困惑的同学。前面分享了两篇文章：十分钟读懂StableDiffusion运行原理和一文教会你学会AI绘画利器Sta

机器学习社区·2024-01-14 03:31

斯坦福Mobile ALOHA提到的ACT之外的另两项技术：Diffusion Policy、VINN

前言本文接上一篇文章《斯坦福机器人MobileALOHA的关键技术：动作分块ACT的算法原理与代码剖析》而来，当然最开始本文是作为上一篇文章的第二、第三部分的但因为ACT太过关键，除了在上一篇文章中写清楚其算法原理之外，还得再剖析其代码实现，故为避免上一篇文章太过长，也为更清楚的阐述DiffusionPolicy、VINN，故便有了本文第一部分DiffusionPolicy如我组建的复现团队里的邓

v_JULY_v·2024-01-13 20:13

机器学习扩散模型简介

仅在2020年代发布的几篇开创性论文就向世界展示了Diffusion模型的能力，例如在图像合成方面击败GAN[6]。

无水先生·2024-01-13 17:18

深入浅出完整解析Stable Diffusion（SD）核心基础知识

u013250861·2024-01-13 15:19

Stable Diffusion的 webui 如何在Windows上使用 AMD GPU显卡？

根据StableDiffusion官方说明webui是不支持AMDGPU显卡的，所以在国内如果想省点事情要玩StableDiffusion(SD)推荐用黄教主的英伟达显卡NVIDIAGPU，可以省心不少。AMD显卡得用webui-directml，这是另外的包，按官方的说明实际操作并不难，下面先说在Windows上的步骤：安装Python3.10.6版（勾选addpython.exetoPATH，

Okailon·2024-01-13 10:08

stable diffusion使用相关

IPAdapter，我愿称之它为SD垫图IPAdapter是腾讯lab发布的一个新的StableDiffusion适配器，它的作用是将你输入的图像作为图像提示词，本质上就像MJ的垫图。IPAdapter比reference的效果要好，而且会快很多，适配于各种stablediffusion模型，还能和controlnet等一起用。

hn_lgc·2024-01-13 10:05

Stable Diffusion 提示词解析｜AI绘画

概述玩了很久的SD，感觉已经没有一开始的激情了，最近有幸看到了几篇关于提示词的指导文章，突然感觉又发现了新大陆，整理后供大家一起学习。好的提示词应该包含如下几个模块：Anatomyofagoodprompt解析好的提示词Subject(required)主题Medium媒介Style风格Artist-WebsiteArt-sharing网站Resolution决议Additionaldetails

这都不是事er·2024-01-13 10:02

AI绘画软件Stable Diffusion模型/Lora/VAE文件存放位置

模型种类大模型大模型特指标准的latent-diffusion模型。拥有完整的TextEncoder、U-Net、VAE。由于想要训练一个大模型非常困难，需要极高的显卡算力，所以更多的人选择

手把手教你学AI·2024-01-13 05:12

用通俗易懂的方式讲解：一文教会你学会 AI 绘画利器 Stable Diffusion

随着stable-diffusion的开源，让更多人有机会直接参与到AI绘画的创作中，相关的教程也如雨后春笋般的出现。

机器学习社区·2024-01-13 02:18

stable diffusion代码学习笔记

前言：本文没有太多公式推理，只有一些简单的公式，以及公式和代码的对应关系。本文仅做个人学习笔记，如有理解错误的地方，请指出。本文包含stablediffusion入门文献和不同版本的代码。文献资源本文学习的代码；相关文献：DenoisingDiffusionProbabilisticModels:DDPM，这个是必看的，推推公式DenoisingDiffusionImplicitModels：DD

Ctrl_Cver·2024-01-12 19:06

2024-01-11 部署Stable Diffusion遇挫记

点击快速C语言入门部署StableDiffusion遇挫记前言一、一如既往的`GitHub`部署二、使用的感受总结createbyStableDiffusion;prompt:firewaterllama前言要解决问题:由于近期的努力,已经实现语音转文字模型,通用chat迷你大模型的本地部署与使用自由,貌似还缺了一个图像,别无选择stablediffusion想到的思路:stable-diffus

不停感叹的老林_·2024-01-12 19:35

2024年1月11日最热AI论文Top5：开源界Stable Diffusion杀手、Prompt-tuning、零和游戏博弈

本文整理了今日发表在ArXiv上的AI论文中最热门的TOP5。以下内容由赛博马良-「AI论文解读达人」智能体生成，人工整理排版。「AI论文解读达人」智能体可提供每日最热论文推荐、AI论文解读等功能。如需查看其他热门论文，欢迎移步saibomaliang.com^_^TOP1PIXART-δ:FastandControllableImageGenerationwithLatentConsistenc

夕小瑶·2024-01-12 05:40

ICCV 2023 | 从14篇论文看如何改进扩散模型diffusion ？

1、DiscriminativeClassTokensforText-to-ImageDiffusionModels文本到图像扩散模型，使得生成多样且高质量的图像成为可能。然而，这些图像往往在描绘细节方面不够精细，并且容易出现由于输入文本的歧义导致的错误。缓解这些问题的一种方法是在带类标签的数据集上训练扩散模型。这种方法有两个缺点：（i）监督数据集通常与大规模抓取的文本-图像数据集相比较小，影响生

机器学习与AI生成创作·2024-01-12 04:22

【论文笔记】End-to-End Diffusion Latent Optimization Improves Classifier Guidance

AbstractClassifierguidance为图像生成带来了控制，但是需要训练新的噪声感知模型(noise-awaremodels)来获得准确的梯度，或使用最终生成的一步去噪近似，这会导致梯度错位(misalignedgradients)和次优控制(sub-optimalcontrol)。梯度错位(misalignedgradients)：通过噪声感知模型指导生成模型时，两个模型的结构和目

xhyu61·2024-01-12 02:08

【扩散模型】11、Stable Diffusion | 使用 Diffusers 库来看看 Stable Diffusion 的结构

文章目录一、什么是StableDiffusion二、Diffusers库三、微调、引导、条件生成3.1微调3.2引导3.3条件生成四、StableDiffusion4.1以文本为条件生成4.2无分类器的引导4.3其它类型的条件生成：超分辨率、图像修补、深度图到图像的转换4.4使用DreamBooth微调五、使用Diffusers库来窥探StableDiffusion内部5.1StableDiffu

呆呆的猫·2024-01-12 01:13

diffusers flask streamlit 简洁可视化文生图页面

参考：https://python-bloggers.com/2022/12/stable-diffusion-application-with-streamlit/https://github.com

loong_XL·2024-01-11 18:02

使用 Docker 和 Diffusers 快速上手 Stable Video Diffusion 图生视频大模型

本篇文章聊聊，如何快速上手StableVideoDiffusion(SVD)图生视频大模型。写在前面月底计划在机器之心的“AI技术论坛”做关于使用开源模型“StableDiffusion模型”做有趣视频的实战分享。因为会议分享时间有限，和之前一样，比较简单的部分，就用博客文章的形式来做补充分享吧。本篇是一篇相关的补充内容，主要聊聊使用开源行业标杆stability.ai出品的StableVideo

soulteary·2024-01-11 18:26

2024年AIGC趋势展望：视频生成的“百模大战”

2023年底发布的svd(stabilityai/stable-video-diffusion-img2vid·HuggingFace)、EMU(https://ai.meta.com/blog/emu-text-to-video-generation-image-editing-research

沉迷单车的追风少年·2024-01-11 15:50

论文学习使用基于NeRF的精炼特征从3D感知Diffusion模型下实现单视点下的人工重建

论文学习使用基于NeRF的精炼特征从3D感知Diffusion模型下实现单视点下的人工重建论文连接前言摘要介绍相关工作2.13D生成的扩散模型2.2单视点下的新视点生成神经场（NeRF）以外的方法基于神经场

Lyrig~·2024-01-11 10:52

斯坦福机器人Mobile ALOHA的背后技术：动作分块ACT、Diffusion Policy、VINN

前言23年已过35今24年则将36，到40岁之前还有4年半，这4年半我想冲一把大模型机器人(兼具商业价值、社会价值、科技价值)，更大的如造车我也干不了，但通过过去一年的研究探索与应用开发，机器人是在可能范围之内我能做的最大的项目，很难，4年半下来也不一定能达到预期，但全力希望通过Q1之内的技术准备、复现Mobliealoha、建机器人开发团队之后，Q2之内可以拿到一笔融资全力开干(至于教育培训会永

v_JULY_v·2024-01-10 17:44

如何使用 ChatGPT 生成 Stable diffusion 提示词

chatgpt免费体验入口网址：http://chat.xutongbao.top一、教chatgpt写提示词StableDiffusion是一款利用深度学习的文生图模型，支持通过使用提示词来产生新的图像，描述要包含或省略的元素。我在这里引入StableDiffusion算法中的Prompt概念，又被称为提示符。下面的prompt是用来指导AI绘画模型创作图像的。它们包含了图像的各种细节，如人物的

徐同保·2024-01-10 03:40

【深度学习】SDXL tensorRT 推理，Stable Diffusion 转onnx，转TensorRT

文章目录sdxl转diffusers转onnx转TensorRTsdxl转diffusersdefconvert_sdxl_to_diffusers(pretrained_ckpt_path,output_diffusers_path):importosos.environ["HF_ENDPOINT"]="https://hf-mirror.com"#设置HF镜像源（国内用户使用）os.envir

XD742971636·2024-01-09 23:48

Stable Diffusion初体验

体验了下StableDiffusion2.0的图片生成，效果还是挺惊艳的，没有细调prompt输入，直接输入了下面的内容：generateaEliminationGameimageofburnningtree,Cyberpunkstyle然后点击生成，经过了10多秒的等待就输出了下面的结果。稍后会稍微深入的学习下stablediffusion的生成过程，以及深入的使用方法。同时也会将学习心得在这里

LF-DevJourney·2024-01-09 19:52

Adding Conditional Control to Text-to-Image Diffusion Models——【论文笔记】

本文发表于ICCV2023论文地址：ICCV2023OpenAccessRepository(thecvf.com)官方实现代码：lllyasviel/ControlNet:Letuscontroldiffusionmodels!(github.com)Abstract论文提出了一种神经网络架构ControlNet,可以将空间条件控制添加到大型的预训练文本到图像扩散模型中。ControlNet将预

我是浮夸·2024-01-09 08:20

多场景PAI-Diffusion中文模型家族大升级，12个模型、2个工具全部开源

阿里云机器学习PAI团队为推动这一领域的发展，参考了StableDiffusion的模型结构，结合中文语言的特点，通过大量对模型预训练数据的处理和过滤，以及训练过程的优化，提出了PAI-Diffusion

阿里云大数据AI技术·2024-01-08 17:36

谷歌colab测试diffusers

upgradediffusersfromdiffusersimportDiffusionPipelineimporttorchpipeline=DiffusionPipeline.from_pretrained("runwayml/stable-diffusion-v1

pyc_666666·2024-01-08 16:59

Stable Diffusion架构的3D分子生成模型 GeoLDM - 测评与代码解析

之前，向大家介绍过3D分子生成模型GeoLDM。GeoLDM按照StableDiffusion架构，将3D分子生成的扩散过程运行在隐空间内，优化了基于扩散模型的分子生成。可能是打开Drug-AIGC的关键之作。让精确控制分子生成有了希望。详见：分子生成领域的stablediffusion-GEOLDM-CSDN博客）作者提供了GitHub代码：https://github.com/MinkaiXu

wufeil·2024-01-08 16:24

借助 ControlNet 生成艺术二维码 – 基于 Stable Diffusion 的 AI 绘画方案

背景介绍在过去的数月中，亚马逊云科技已经推出了多篇Blog，来介绍如何在亚马逊云科技上部署StableDiffusion，或是如何结合AmazonSageMaker与StableDiffusion进行模型训练和推理任务。为了帮助客户快速、安全地在亚马逊云科技上构建、部署和管理应用程序，众多合作伙伴与亚马逊云科技紧密合作。他们提供各种各样的服务、深入的技术知识、最佳实践和解决方案，包括基础设施迁移

TiAmo zhang·2024-01-08 15:48

stable diffusion 百宝书

文章目录0.环境搭建0.1Windows0.1.1git环境安装0.1.2python环境搭建0.1.2.1配置pip国内镜像源0.1.3stablediffusion环境搭建0.1.3.1远程访问Stablediffusion0.1.3.2模型Lora下载1.SD基础1.1文生图基本原理1.2StableDiffusion实战1.2.1基本参数说明1.2.1.1模型1.2.1.2采样方法1.2.

shenmingik·2024-01-08 14:05

stable diffusion WebUI基础-安装

电脑配置要求N卡显存6G起（建议直接上12G）内存建议16G，8G也可固态盘500G以上CPUi5即可魔法上网虚拟环境安装python我非常不建议直接在自己的电脑里直接装python,因为现在很多项目的环境比较乱，对于stablediffusion尽可能有一个干净的python环境最好，所以我推荐使用miniconda安装miniconda【1】在清华大学开源软件镜像站下载安装包，https://

mindcarver·2024-01-08 09:17

stable diffusion 人物高级提示词（五）场景、特效、拍摄手法、风格

一、场景场景Promptindoor室内outdoor室外cityscape城市景色countryside乡村beach海滩forest森林mountain山脉snowfield雪原skyscraper摩天大楼ancientmonument古代遗迹cathedral大教堂library图书馆museum博物馆officebuilding办公大楼restaurant餐厅streetmarket街头市

洛克Lee·2024-01-08 09:46

Stable Diffusion 系列教程 - 6 Dreambooth及训练

Stable-Diffusion、Imagen等文生图大模型已经具备了强大的生成能力，假设我们的Prompt为[CyberpunkStyle]，SD或许能很快画出赛博朋克风格的一幅画。

@会飞的毛毛虫·2024-01-08 08:43

教程：自定义Stable Diffusion扩展（以ControlNet为例）

ImplementationPipelineofStableDiffusionwithControlNet@zilla0717本文梳理了用ControlNet控制StableDiffusion输出的实现思路。分析对象StableDiffusionWebUIControlNetExtensionforStableDiffusionWebUIControlNet作为StableDiffusionWeb

电车上那个cll呀·2024-01-08 00:46

2023年Diffusion Models还有哪些方向值得研究(好发论文)？

DiffusionModels专栏文章汇总：入门与实战前言：笔者follow扩散模型的科研进展已经将近2年了，见证了diffusion从无人问津到炙手可热的过程。当下扩散模型还有哪些缺点？

沉迷单车的追风少年·2024-01-07 18:55

推荐频道

diffusion