Diffusion

｜ DALL-E 3、Stable Diffusion等20+ 图像生成模型综述

随着科技飞速发展，CES（国际消费电子展）已然成为全球科技产业的风向标，每年的CES大会都是业界瞩目的盛事。回顾2024年CES大会，不难发现其亮点纷呈，其中以人工智能的深度赋能为最引人注目之处。AI技术的深入应用成为CES大会上的一大亮点，各大厂商纷纷展示了在AI领域的最新成果。关键词：CES；AI；VR；消费电子；生成式AI；NVIDIA；Copilot；RabbitR1；VisionPro；
高性能服务器·2024-01-26 15:01

【AI绘画】Stable Diffusion 提示词——时尚日志封面

今天来给大家分享，如何用sd简单的咒语输出好看的图片的教程，今天做的是时尚杂志专题，话不多说直入主题。一、基本设置：正向提示词：画质：Highestquality,ultra-highdefinition,masterpieces,8kquality,画面主题：1girl,youngbeautifulgirl,Whiteskin,longlegs,delicateskin,bigeyes,ultr
AI想象家·2024-01-26 14:50

【AI绘画】Stable Diffusion使用入门教程！！！！

手把手教你入门绘图超强的AI绘画，用户只需要输入一段图片的文字描述，即可生成精美的绘画。给大家带来了全新保姆级教程资料包（文末可获取）首先提几个好玩的名词：炼丹：训练AI学习图片生成模型咒语：prompt提示词一、prompt提示词1、概况包含内容：作品主题、画风、形象特点以及一些具体包含的要素提示词的语法规则：提示词需要英文书写提示词以词组作为单位2、prompt分类（1）人物及主体特征服饰穿搭
AI想象家·2024-01-26 14:50

Stable Diffusion结构解析-以图像生成图像（图生图，img2img）

手把手教你入门绘图超强的AI绘画，用户只需要输入一段图片的文字描述，即可生成精美的绘画。给大家带来了全新保姆级教程资料包（文末可获取）AIGC专栏3——StableDiffusion结构解析-以图像生成图像（图生图，img2img）为例学习前言源码下载地址网络构建一、什么是StableDiffusion（SD）二、StableDiffusion的组成三、img2img生成流程1、输入图片编码2、文
AI想象家·2024-01-26 14:50

Stable Diffusion基础界面介绍！！！！！

手把手教你入门绘图超强的AI绘画，用户只需要输入一段图片的文字描述，即可生成精美的绘画。给大家带来了全新保姆级教程资料包（文末可获取）StableDiffusionWebUI是一个基于StableDiffusion的基础应用，利用gradio模块搭建出交互程序，可以在低代码GUI中立即访问StableDiffusionStableDiffusion是一个画像生成AI，能够模拟和重建几乎任何可以以视
AI想象家·2024-01-26 14:49

DIFFUSION POSTERIOR SAMPLING FOR GENERAL NOISY INVERSE PROBLEMS

DIFFUSIONPOSTERIORSAMPLINGFORGENERALNOISYINVERSEPROBLEMSAbstract1.Introduction2.Background2.1SCORE-BASEDDIFFUSIONMODELS2.2INVERSEPROBLEMSOLVINGWITHDIFFUSIONMODELS3DIFFUSIONPOSTERIORSAMPLING(DPS)3.1APP
黑洞是不黑·2024-01-26 14:14

DiffBIR: Towards Blind Image Restoration with Generative Diffusion Prior

DiffBIR:TowardsBlindImageRestorationwithGenerativeDiffusionPriorAbstract1.Introduction2.Relatework3.Methodology3.1退化去除预训练3.2利用生成先验进行图像重建3.3保真度-真实性权衡的潜在图像引导4.Experiments4.1数据集、实现、度量4.2与最先进方法的比较Abstract
黑洞是不黑·2024-01-26 14:40

深入浅出 diffusion（2）：pytorch 实现 diffusion 加噪过程

我在上篇博客深入浅出diffusion（1）：白话diffusion原理（无公式）中介绍了diffusion的一些基本原理，其中谈到了diffusion的加噪过程，本文用pytorch实现下到底是怎么加噪的
木水_·2024-01-26 11:40

【SVD生成视频+可本地部署】ComfyUI使用（二）——使用Stable Video Diffusion生成视频 （2023.11开源）

SVD官方主页：Huggingface||Stability.ai||论文地址huggingface在线运行demo:https://huggingface.co/spaces/multimodalart/stable-video-diffusionSVD开源代码：Github（含其他项目）||Huggingface在Comfyui使用：ComfyUI国内下载|SVD模型下载||官网下载(Gith
曾小蛙·2024-01-26 09:41

云 安装Stable Diffusion WebUi CPU模式

本机内存32G3.拉取WebUI$gitclonehttps://github.com/AUTOMATIC1111/stable-diffusion-webui.git$cdstable-diffusion-webui4
wllxxxx·2024-01-26 07:11

使用docker部署stable-diffusion

使用docker部署stable-diffusion环境准备安装nvidia-container-toolkit安装stable-diffusion环境准备wsl2ubuntu20.04dockerpython3.10git
weixin_47466185·2024-01-26 07:11

Stable Diffusion WebUI Build 停在 “Attaching to webui-docker-auto-1”

使用dockerdesktop4.17.1BuildStableDiffusionWebUI会停在“Attachingtowebui-docker-auto-1”。使用dockerdesktop4.17.0即可正常Build。下载dockerdesktop4.17.0:DockerDesktopreleasenotes
qqqqqqlzm669·2024-01-26 07:07

linux conda 配置 stable video diffusion

安装教程1下载仓库源码gitclonehttps://github.com/Stability-AI/generative-models.git2创建conda环境condacreate-nsvdpython=3.10condaactivatesvd3安装pytorchgpucuda和cudnn请参考其他链接配置，使用conda或者pip安装pytorch#使用conda安装pytorch，推荐该
lanlinbuaa·2024-01-26 07:33

Stable-diffusion安装时Can‘t load tokenizer for ‘openai/clip-vit-large-patch14‘2种解决方案

在安装Stable-diffusionWebuUI时，运行pythonlaunch.py出现Can‘tloadtokenizerfor‘openai/clip-vit-large-patch14问题，这是因为安装过程中需要去huggingface网站下载一些文件，但该网站被墙，所以报错。所以可以自己去网站下载好对应文件：https://huggingface.co/openai/clip-vit-
lanlinbuaa·2024-01-26 07:02

Docker部署Stable-Diffusion-webui

前排提示：如果不想折腾，可直接跳到最后获取封装好的容器，一键运行:D前言乘上AI生成的快车，一同看看沿途的风景。启一个miniconda容器dockerrun-itd-v宿主机内SD项目路径:/tmp--gpusall--ipchost-p7860:7860continuumio/miniconda3:latest打开容器：dockerexec-it容器idbashcd/tmp下载项目代码gitc
Dreamcatcher风·2024-01-26 07:26

国内外AI绘画『文生图』模型效果对比

最近AI作画确实很火，在DALL-E和Imagen崭露头角之后，ERNIE-ViLG、Stable-Diffusion（SD）、Disco-Diffusion相继开源开放，涌现出丰富多彩的AI作画作品。
AI小工·2024-01-25 21:31

InsCode Stable Diffusion 美图活动投稿

本地部署可以使用B站大佬秋叶的整合包CSDN亦提供了StableDiffusion模型在线使用地址：https://inscode.csdn.net/@inscode/Stable-Diffusion模型相关版本和参数配置
Binarydog_Lee·2024-01-25 16:59

菜鸟初进stable diffusion

DALLEMidjourneystablediffusionlatentdiffusion说是改进点在于“给输入图片压缩降低维度，所以有个latent，从而减少计算量”，类似于下采样吧，编码后在特征空间搞动作，而不是像diffusion
Mighty_Crane·2024-01-25 11:40

Stable diffusion 和 Midjourney 怎么选？

选择其实很简单，两者成图各有侧重。特点：Stablediffusion更擅长局部修改，操作更加复杂，可控性强，但瑕疵多，难以一次完美。Midjourney张张精品，上手容易，局部修改效果不佳，往往需要多次生成结果。如果需要生成某一类作品，只要成功一次以后，再做就简单很多了。比如人物头像。另外有一些限制，作为公司产品，有一些类似图片，比如儿童，色情图片是不能够生成的。两者的选择不仅仅看作品效果，还要
蜉蝣1号·2024-01-25 11:39

diffusion 和 gan 的优缺点对比

sample速度GAN更快，Diffusion需要迭代更多次。训练难度GAN的训练可能是不稳定的，容易出现模式崩溃和训练振荡等问题。Diffusion训练loss收敛性好，比较平稳。
木水_·2024-01-25 07:50

【思路】stable diffusion应用场景细分及实现设想

1音乐视频生成结合音频输入和视觉模型，生成与音乐节奏和情感相匹配的视觉效果和动画。通过分析音频的节奏、音调和情感，可以生成具有动感和艺术性的音乐视频，用于音乐创作、艺术表演或广告制作等领域。方法：音频分析：首先，对输入的音频进行分析，提取其节奏、音调和情感等特征。这可以通过音频处理算法、音频特征提取技术或深度学习模型来完成。视觉效果设计：根据音频特征和所需的视觉效果，设计合适的视觉效果元素，如动画
李加号pluuuus·2024-01-24 14:31

【思路合集】talking head generation+stable diffusion

1以DiffusionVideoEditing为baseline：改进方向针对于自回归训练方式可能导致的漂移问题：训练时，在前一帧上引入小量的面部扭曲，模拟在生成过程中自然发生的扭曲。促使模型查看身份帧以进行修正。在像VoxCeleb或LRS这样的具有不受限制条件的训练集中，训练更多样化的说话人数据。针对训练速度慢，算力消耗大的问题：作者尝试在潜空间中进行训练以加快训练速度，但是样本质量下降，因此
李加号pluuuus·2024-01-24 14:58

基于PAI-EAS一键部署Stable Diffusion AIGC绘画

人工智能平台PAI完成云上StableDiffusion以文生图应用搭建，支持两种方式：使用交互式建模PAI-DSW使用模型在线服务PAI-EAS两种部署适用人群：1.使用交互式建模PAI-DSW部署StableDiffusion亮点：Notebook经典界面，对习惯代码操作的开发者更加友好；支持微调训练等操作，灵活度更高；有丰富的最佳实践教程可参考，能直接在产品中打开；已完成镜像预置等前序工作，
阿里云大数据AI技术·2024-01-24 10:06

Stable Diffusion学习

参考StableDiffusion原理详解_stablediffusioncsdn-CSDN博客StableDiffusion是stability.ai开源的图像生成模型，可以说StableDiffusion的发布将AI图像生成提高到了全新高度，其效果和影响不亚于OpenAI发布ChatGPT。图像生成的发展在StableDiffusion诞生之前，计算机视觉和机器学习方面最重要的突破是GAN（G
wangqiaowq·2024-01-24 07:53

Stable Diffusion能生成视频了！动画版上线！支持文本图像视频多种输入方式

点击下方卡片，关注“CVer”公众号AI/CV重磅干货，第一时间送达点击进入—>【GAN和扩散模型】微信技术交流群西风发自凹非寺转载自：量子位（QbitAI）StableDiffusion也能生成视频了！你没听错，StabilityAI推出了一款新的文本生成动画工具包StableAnimationSDK，可支持文本、文本+初始图像、文本+视频多种输入方式。使用者可以调用包括StableDiffus
Amusi（CVer）·2024-01-24 00:14

通过Stable Diffusion生成虚假的遥感影像

然后我在想遥感有没有相关的生成模型，找了一下，还真找到了（https://github.com/xiaoyuan1996/Stable-Diffusion-for-Remote-Sensing-Image-Generation
遥感之家·2024-01-24 00:13

利用GPU加速自定义风格图像生成-利用GPU加速结合了ControlNet/ Lora的Stable Diffusion XL

点击链接完成注册，参加本次在线研讨会https://www.nvidia.cn/webinars/sessions/?session_id=240124-31319随着AI技术的发展,数字内容创建业务也变得越来越火热。生成式AI模型的发布,让我们看到了人工智能在各行各业的潜力。您只需要用语言简单描述自己希望看到的画面,AI便可以自动生成画作。生成式AI模型的广泛应用，不仅提高了我们的工作效率，也为
扫地的小何尚·2024-01-23 14:27

【BBuf的CUDA笔记】十三，OpenAI Triton 入门笔记一

0x0.前言2023年很多mlsys工作都是基于Triton来完成或者提供了Triton实现版本，比如现在令人熟知的FlashAttention，大模型推理框架lightllm，diffusion第三方加速库
just_sort·2024-01-23 13:27

stable diffusion和midjourney怎么选？

选择StableDiffusion还是Midjourney主要取决于您的具体需求和偏好。以下是一些关于这两款工具的比较，供您参考：StableDiffusion：优点：可定制性高：StableDiffusion允许用户根据需求和偏好选择不同的模型进行绘图，具有较强的灵活性。商业应用程度高：用户可以根据自己的需求训练自己的模型，实现更个性化的绘图效果。文本生成功能强大：StableDiffusion
打工人何苦为难打工人·2024-01-23 13:23

带你从零开始入门AI绘画神器Stable Diffusion

一个叫Midjourney（简称MJ），另一个叫Stable-Diffusion（简称SD）。MJ需要付费使用，而SD开源免费，但是上手难度和学习成本略大，并且非常吃电脑配置（显卡、内存）。
执刀人的工具库·2024-01-22 11:09

AI绘画Stable Diffusion进阶使用

本文讲解，模型底模，VAE美化模型，Lora模型，hypernetwork。文本StableDiffusion简称sd欢迎关注使用模型C站：https://civitai.com/huggingface：https://huggingface.co/models?pipeline_tag=text-to-image大模型（底模型）stablediffusionwebui部署完成后，checkpoi
Dlimeng聊AI·2024-01-22 11:36

Stable Diffusion中的Embeddings

什么是Embeddings？Embeddings是一种数学技术，它允许我们将复杂的数据（如文本或图像）转换为数值向量。这些向量是高维空间中的点，可以捕捉数据的关键特征和属性。在文本处理中，例如，embeddings可以捕捉单词或短语之间的语义关系，而在图像处理中，它们可以表示图像的视觉内容。Embeddings在StableDiffusion中的角色StableDiffusion是一种基于深度学习
CCSBRIDGE·2024-01-22 08:20

一些安装AUTOMATIC1111的Stable Diffusion WebUI常遇到的错误消息的解决方式

确保电脑符合StableDiffusion的系统需求1.电脑硬件需求最低配备建议配备注解显卡(GPU)GTX1050TiRTX3060Ti支持的显卡芯片有Nvidia/AMD/IntelArc/AppleM。显卡显存(VRAM)4GB8GB显卡的VRAM最低要4GB才不会算到一半内存不足，若要训练模型就得8GB以上了。内存(RAM)8GB16GB保存空间20GB，最好是SSD处理器(CPU)x86
weixin_44006864·2024-01-21 21:09

CVPR 2023 Hybrid Tutorial: All Things ViTs之CLIP注意力机制可视化

1.总述AllThingsViTs系列讲座从ViT视觉模型注意力机制出发,阐述了注意力机制在多模态模型如CLIP,及diffusion模型中的应用.本文给出CLIP注意力机制可视化部分阅读学习体会.课程视频与课件
微凉的衣柜·2024-01-21 21:26

【从零到一AIGC源码解析系列1】文本生成图片Stable Diffusion的diffusers实现

目录1.如何使用StableDiffusionPipeline1.1环境配置1.2StableDiffusionPipeline1.3生成非正方形图像2.如何使用diffusers构造自己的推理管线关注公众号【AI杰克王】StableDiffusion是由CompVis、StabilityAl和LAION的研究人员和工程师创建的文本到图像潜在扩散模型。它使用来自LAION-5B数据库子集的512x
AI杰克王·2024-01-21 20:39

提升Stable Diffusion中用户提示词质量以改善图像生成结果

前言在使用StableDiffusion等深度学习模型进行图像生成时，用户提示词的质量对于最终生成的图像质量至关重要。以下是一篇面向初学者的指南，旨在帮助用户学会如何提高生成提示词的质量，从而使embeddings更有效地协调StableDiffusion生成符合用户意向的图像。理解Embeddings和用户提示词的关系首先，我们需要明白embeddings并不是用户的提示词模板，而是将这些提示词
CCSBRIDGE·2024-01-21 16:26

Stable Diffusion

系列文章目录第一章StableDiffusion第二章LoRa实操入门文章目录系列文章目录前言一、大白话原理介绍1.正向扩散2.反向扩散前言StableDiffusion是一种新型的图像生成模型，这里主要参考自b站up主大白话AI，这是我迄今为止见过将StableDiffusion讲的最清晰的，up是个人才，推荐大家去观看原视频。LoRa是大模型微调的一种基础方法，广泛应用于语言大模型、视觉大模型
saoqi_boy·2024-01-21 13:53

第二十八周周报

更新扩散强度时需要得到不同gpu上真实图片的损失，但ada_stats的结果一直为nan导致diffusion的扩散强度无法计算。
童、一·2024-01-20 22:49

扩散模型： Diffusion Model概念讲解

DiffusionModel课件视频前向扩散过程在原始图像中逐步添加高斯分布随机噪声，直到最后得到完全噪声的图像。反向降噪过程逐步去除噪声图中的噪声，得到最后原图。根据噪声图和时间步得到预测的噪声，然后噪声图减去噪声得到原始图噪声预测的标签来自于前向扩散过程中添加的噪声
WindyChanChan·2024-01-20 19:24

扩散模型：Diffusion Model原理剖析

DiffusionModel视频Training第5行是唯一需要解释的地方，x0x_{0}x0是干净的图片，ϵθ\epsilon_{\theta}ϵθ是前面说的NoisePredictor，它的输入包括加噪声之后的图像（红色框）以及时序ttt，ϵ\epsilonϵ是训练的target也就是添加的噪声。它其实与前面我们提到的一步步加噪的过程不一样，而是一次就可以了。Inference最大似然估计倒数
WindyChanChan·2024-01-20 19:51

stable-diffusion-webui 安装前准备

大家好，我是水滴~~在安装stable-diffusion-webui前需要做一些准备工作，本篇文章主要介绍需要的电脑配置、魔法、安装Python、安装Git等。
水滴技术·2024-01-20 17:38

RuntimeError: Torch is not able to use GPU； 解决方案

大家好，我是水滴~~本文主要介绍在启动stable-diffusion-webui时出现的RuntimeError:TorchisnotabletouseGPU;add--skip-torch-cuda-testtoCOMMANDLINE_ARGSvariabletodisablethischeck
水滴技术·2024-01-20 17:08

理解 Stable Diffusion、模型检查点(ckpt)和变分自编码器(VAE)

前言在探索深度学习和人工智能领域的旅途中，理解StableDiffusion、模型检查点(ckpt)以及变分自编码器(VAE)之间的关系至关重要。这些组件共同构成了当下一些最先进图像生成系统的基础。本文将为初学者提供一个详细的概述，帮助您理解这些概念以及它们是如何协同工作的。StableDiffusion模型简介StableDiffusion是一个用于生成和修改图像的深度学习模型。它是基于神经网络
CCSBRIDGE·2024-01-20 17:38

尝试着在Stable Diffusion里边使用SadTalker进行数字人制作

首先需要标明的是，我这里是图片说话类型，而且是看了知识星球AI破局俱乐部大航海数字人手册进行操作的。写下这篇文章是防止我以后遗忘。我使用的基础软件是StableDiffusion，SadTalker是作为插件放进来的，需要注意的是这对自己的电脑GPU要求比较高，至少需要8G，至少我的电脑是8G显存。下载并安装ffmpeg下载并安装ffmpeg，这一步的作用是语音格式的各种转换，虚拟数字人能开口说话
zhaoseaside·2024-01-20 17:37

stable-diffusion-webui 安装与运行

大家好，我是水滴~~本文主要介绍在各种显卡环境中，如何安装和运行stable-diffusion-webui，包括：在NVIDIA显卡环境上安装、在AMD显卡环境上安装、在集显或小于4G显卡环境上安装。
水滴技术·2024-01-20 17:37

【论文阅读笔记】Continual Diffision: Continual Customization of Text-to-Image Diffusion with C-LoRA

论文信息论文标题ContinualDiffision:ContinualCustomizationofText-to-ImageDiffusionwithC-LoRA发表刊物arXiv2023作者团队三星(美国)、佐治亚理工大学关键词ContinualLearing,DiffusionModel,Text-to-Image,LoRA文章结构C-LoRAIntroductionBackgroundC
ZedKingCarry·2024-01-19 08:24

Re6:State of the Art on Diffusion Models for Visual Computing

Abstract将会主要介绍扩散模型的基本数学概念、流行的扩散模型实现细节，以及其应用，最后讨论可用的数据集，指标等1Introduction生成式模型的能力大爆发，如StableDiffusion,Imagen,Midjourney,DALL-E2,DALL-E3等2ScopeofthisSTAR挑战网络上的3D物体或场景的实例图片很少扩散模型的推理时间很慢，网络规模太大，训练速度慢，推理速度慢
Zhuanshan_·2024-01-19 08:23

Multi-Concept Customization of Text-to-Image Diffusion——【代码复现】

上的一篇论文：[2212.04488]Multi-ConceptCustomizationofText-to-ImageDiffusion(arxiv.org)一、引言本文主要做的工作是对stable-diffusion
我是浮夸·2024-01-19 08:21

Adding Conditional Control to Text-to-Image Diffusion Models——【代码复现】

官方实现代码地址：lllyasviel/ControlNet:Letuscontroldiffusionmodels!(github.com)一、前言此项目的使用需要显存大于8G，训练自己的ControlNet或需要更大，因此请注意查看自身硬件是否符合。在此之前请确保已经安装好python以及相关IDE工具。二、环境安装这里主要还是基于官网文档来进行代码复现。1.创建虚拟环境condaenvcre
我是浮夸·2024-01-19 08:20

Multi Diffusion: Fusing Diffusion Paths for Controlled Image Generation——【论文笔记】

本文发表于ICML2023论文官网：MultiDiffusion:FusingDiffusionPathsforControlledImageGeneration一、Intorduction文本到图像生成模型已经具有合成高质量和多样化图像的能力，但是由于难以为用户提供对生成内容的直观控制，因此将文本到图像模型部署到现实世界的应用程序仍然具有挑战性。目前实现对扩散模型实现可控的图像生成主要有两种方式
我是浮夸·2024-01-19 08:50
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他