Diffusion

【笔记】扩散模型（七）：Latent Diffusion Models（Stable Diffusion）论文解读与代码实现

论文链接：High-ResolutionImageSynthesiswithLatentDiffusionModels官方实现：CompVis/latent-diffusion、CompVis/stable-diffusion
LittleNyima·2024-09-15 00:42

Stable Diffusion-AI美女模特写真使用InstantID插件（附插件）

ControlNet单元1：上传人脸定位照上传任意一张照片，它的作用是控制最终出图的人物脸部位置。我们可以和第一张图片一样。相关[参数设置如下：控制类型：选择"Instant_ID"预处理器：instant_id_face_keypoints模型：control_instant_id_sdxl控制权重：0.5左右（0.45-0.5）【第四步】图片的生成点击【生成】按钮，我们来看一下最终生成的图片效
快乐星球没有乐·2024-09-12 16:08

Midjourney和 Stable Diffusion，学谁呢?

Midjourney是在线的，可以使用文字制作令人惊叹的AI图片。它与StableDiffusion类似，但也有一些区别。Midjourney只能在互联网上使用，并且需要付费。那么，值得为Midjourney付费吗？它与稳定扩散有何不同？MidjourneyvsStableDiffusion——功能比较您将在本节中找到StableDiffusion和Midjourney之间的详细比较。与Midjo
Ai君臣·2024-09-12 14:40

【Vidu发布】中国首个长时长、高一致性、高动态性Video AI大模型

该模型采用生数科技团队原创的Diffusion与Transformer融合的架构U-ViT。
叶锦鲤·2024-09-12 13:44

如何在算家云搭建模型Stable-diffusion-webUI（AI绘画）

二、模型搭建流程1.选择主机和镜像（1）进入算家云的“应用社区”，点击搜索或者找到"stable-diffusion-webui，进入详情页后，点击“创建应用”（2）进入“租用实例”页面之后会自动匹配模型
算家云·2024-09-05 11:51

FLUX 1 将像 Stable Diffusion 一样完整支持ControlNet组件

之前InstantX团队做的多合一的FluxControlNet现在开始和ShakkerAI合作并推出了：Shakker-Labs/FLUX.1-dev-ControlNet-Union-Pro该模型支持7种控制模式，包括canny(0),tile(1),depth(2),blur(3),pose(4),gray(5)和lowquality(6)，并且还能和其他ControlNet一起使用。模型卡
吴脑的键客·2024-09-02 22:51

如何在Mac电脑上本地部署Stable Diffusion：详细教程（webUI）

StableDiffusion是一款强大的AI生成图像模型，它可以基于文本描述生成高质量的图像。对于想要在本地运行此模型的用户来说，使用Mac电脑部署StableDiffusion是一个非常吸引人的选择，特别是对于M1或M2芯片的用户。本文将详细介绍如何在Mac上本地部署StableDiffusion，包括WebUI的设置。一、准备工作1.系统要求•操作系统：macOS12.0（Monterey）
玩AI的小胡子·2024-09-02 22:20

Your Diffusion Model is Secretly a Zero-Shot Classifier论文阅读笔记

YourDiffusionModelisSecretlyaZero-ShotClassifier论文阅读笔记这篇文章我感觉在智源大会上听到无数个大佬讨论，包括OpenAISora团队负责人，谢赛宁，好像还有杨植麟。虽然这个文章好像似乎被引量不是特别高，但是和AI甚至人类理解很本质的问题很相关，即是不是要通过生成来构建理解的问题，文章的做法也很巧妙，感觉是一些学者灵机一动的产物，好好学习一个！摘要这
Rising_Flashlight·2024-09-01 20:46

探索Stable Diffusion：AI在艺术创作中的无限可能

探索StableDiffusion：AI在艺术创作中的无限可能引言一、StableDiffusion简介定义与历史技术原理概述二、工作原理深入解析扩散模型基础逆向扩散过程详解潜空间与变分自编码器(VAE)U-Net架构的作用三、StableDiffusion与艺术创作的融合创作自由度的提升个性化风格的实现跨媒介艺术的可能性四、案例研究艺术家应用StableDiffusion的实例与传统艺术形式的对
master_chenchengg·2024-08-29 12:30

Stable Diffusion

StableDiffusion是一种基于深度学习的文本到图像生成模型，其原理主要基于扩散模型（DiffusionModel）的变体，即潜在扩散模型（LatentDiffusionModel,LDM）。原理一、技术架构与组成StableDiffusion由三个主要部分组成：变分自编码器（VAE）、U-Net和一个文本编码器。变分自编码器（VAE）：VAE是一种生成模型，用于将图像压缩到低维的潜在空间
Covirtue·2024-08-28 03:18

5分钟 Stable Diffusion 本地安装

StableDiffusion是一种强大的文本到图像生成模型，由于其开源特性，用户可以在本地计算机上进行安装和使用。下面是一个精简的5分钟快速指南，帮助您在本地安装StableDiffusion。为了确保顺利操作，您需要具备一定的计算机基础知识，并预先安装Python和Git。安装前的准备确保系统要求：您需要一台安装了NVIDIA显卡的计算机（最好支持CUDA，至少6GB显存）。操作系统：Wind
狒狒伯尼·2024-08-26 10:45

Stable Diffusion快速安装及prompt的使用

StableDiffusion是一种基于深度学习的文本到图像生成技术，它可以生成高质量的图像。以下是一篇快速安装教程，适合初学者理解和操作。什么是StableDiffusion？StableDiffusion是一种AI模型，它能够根据用户输入的文本描述生成相应的图像。这项技术在艺术创作、游戏设计、广告制作等领域有着广泛的应用。系统要求在开始安装之前，请确保你的计算机满足以下基本要求：操作系统：Wi
老童聊AI·2024-08-26 04:41

5分钟 Stable Diffusion 本地安装

5分钟StableDiffusion本地安装5分钟StableDiffusion本地安装1.引言1.1什么是StableDiffusion？1.2本地安装的优势2.准备工作2.1系统要求2.2推荐硬件配置2.3软件依赖3.安装步骤3.1下载StableDiffusion3.2安装Python环境3.3安装必要的Python库3.4配置环境变量（如适用）4.运行StableDiffusion4.1启
Python老吕·2024-08-26 03:04

stable diffusion和GAN网络的区别，优点缺点是什么

稳定扩散（stablediffusion）和生成对抗网络（GAN）是两种不同的深度学习方法。稳定扩散是一种无监督学习方法，用于图像超分辨率重建。它基于扩散过程模型，通过在不同的时间步骤中对图像进行重建来增加分辨率。该方法能够有效地增加图像的细节，并产生更高质量的图像。其优点包括：无监督学习：稳定扩散不需要使用任何带标签的训练数据，因此可以用于无监督任务。高分辨率重建：稳定扩散能够通过迭代过程逐渐增
爱好很多的算法工程师·2024-08-23 09:15

【Stable Diffusion】：原理、应用与未来展望

一、引言在人工智能的快速发展中，StableDiffusion作为一种先进的随机过程模型，受到了广泛的关注。StableDiffusion不仅能够描述许多自然和人工系统中的随机演化行为，而且在多个领域展现出了广泛的应用潜力。本文将详细介绍StableDiffusion的原理、应用以及未来的发展趋势。二、StableDiffusion的原理StableDiffusion可以被定义为一个基于随机漫步的
Python小原·2024-08-23 07:33

AIGC：Kolors: Effective Training of Diffusion Model for Photorealistic Text-to-Image Synthesis

代码：GitHub-Kwai-Kolors/Kolors:KolorsTeam论文：Kolors/imgs/Kolors_paper.pdfatmaster·Kwai-Kolors/Kolors·GitHub模型：huaggingface:https://huggingface.co/Kwai-Kolors/Kolors-diffusersmodelscope:https://modelscope
微风❤水墨·2024-08-22 17:11

AI绘画Stable Diffusion（SD）常用插件

常用的AI绘画StableDiffusion（SD）软件插件有很多，可以帮助用户提升创作效率和作品质量。以下是一些常见的插件和扩展：1.**ControlNet**：通过提供额外的控制机制，使用户能够更精确地控制生成图像的特定部分。2.**Image2Image**：将现有图像作为输入，通过调整参数生成新的图像。3.**TextualInversion**：允许用户通过输入文本描述生成高质量的图像
梨园猫·2024-08-21 23:49

stable diffusion 提示词进阶语法-学习小结

stablediffusion提示词进阶语法前言提示词语法基础正向提示词基础负面提示词可选正向提示词（特写镜头提示词）进阶语法1——提示词注释进阶语法2——and连接词进阶语法3——BREAK阻断前言AI绘画大家应该都有所接触了吧，mj、sd各有各的好处，俺滴钱包说暂时不支持去买mj账号，所以就先用sd来跑图啦~如果你还没有sd，那就快来看看这位赛博菩萨的启动器吧~博客地址:stablediffu
DTcode7·2024-03-26 23:14

【AIGC】Stable Diffusion的ControlNet插件

ControlNet介绍ControlNet插件是StableDiffusion中的一个重要组件，用于提供对模型的控制和调整。以下是ControlNet插件的主要特点和功能：模型控制：ControlNet允许用户对StableDiffusion中的模型进行精细的控制和调整。用户可以通过调整各种参数和选项来定制模型的行为，以满足特定的需求和任务要求。调整参数：用户可以通过ControlNet插件调整
AIGCExplore·2024-03-13 01:48

High-Resolution Image Synthesis with Latent Diffusion Models

High-ResolutionImageSynthesiswithLatentDiffusionModels（https://arxiv.org/pdf/2112.10752.pdf；GitHub-CompVis/latent-diffusion
仁义礼智信达·2024-03-09 14:41

AI秒出图！StableDiffusion Automatic1111正式支持Tensorrt

今天在AI绘画的开源平台Automatic1111上发布了Tensorrt项目，项目地址是https://github.com/AUTOMATIC1111/stable-diffusion-webui-tensorrt
germandai·2024-03-08 10:33

转载--OpenAI视频生成模型Sora的全面解析：从ViViT、Diffusion Transformer到NaViT、VideoPoet

前言真没想到，距离视频生成上一轮的集中爆发(详见《Sora之前的视频生成发展史：从Gen2、EmuVideo到PixelDance、SVD、Pika1.0》)才过去三个月，没想OpenAI一出手，该领域又直接变天了自打2.16日OpenAI发布sora以来(其开发团队包括DALLE3的4作TimBrooks、DiT一作BillPeebles、三代DALLE的核心作者之一AdityaRamesh等1
依然风yrlf·2024-03-05 09:02

Stable Diffusion 3正式发布，旨在巩固其在AI图像领域相对于Sora和Gemini的领先地位

每周跟踪AI热点新闻动向和震撼发展想要探索生成式人工智能的前沿进展吗？订阅我们的简报，深入解析最新的技术突破、实际应用案例和未来的趋势。与全球数同行一同，从行业内部的深度分析和实用指南中受益。不要错过这个机会，成为AI领域的领跑者。点击订阅，与未来同行！订阅：https://rengongzhineng.io/StabilityAI最近宣布推出StableDiffusion3（简称SD3），这是该
新加坡内哥谈技术·2024-03-03 20:43

Stable Diffusion算法、结构全流程概述

StableDiffusion能力强、功能多、插件广，本文拟概述SD的全流程，方便梳理算法各结构的关系SD发展的重点论文DenoisingDiffusionProbabilisticModels（首次提出去噪扩散模型DDPM）DiffusionModelsBeatGANsonImageSynthesis（OpenAI改进UNet，DM超越GAN，ClassifierGuidance）High-Re
lanlinbuaa·2024-02-27 08:18

stable diffusion webui学习总结（3）：参数设置

一、2.5D偏卡通风格参数设置：步骤1、文生图模型：darkSushiMixMixVAE：vae-ft-mse-840000-ema-pruned正面提示词：(masterpiece,highquality,highres,illustration),blurrybackground,[(whitebackground:1.2)::5],(see-through:0.85),shining,Mov
shanesu·2024-02-22 15:03

基于Diffusion Model的数据增强方法应用——毕业设计 其三

文章目录题目简介前言StableDiffusionLatentdiffusion自动编码器(VAE)U-NetText-EncoderStableDiffusion的推理过程从零开始配置实验环境IDEAnacondaCUDA和CuDNNCuDNNStableDiffusion的本地部署运行测试总结题目简介笔者个人的毕业设计课题如下：简介：使用预训练的DiffusionModel图像生成模型生成图像
大鸟仙童·2024-02-20 21:06

FE.UX-stable diffusion 在交互设计的10个应用示例分享

随着人工智能技术的不断发展，越来越多的AIGC技术被应用到了人们的日常生活中。其中，stablediffusion(SD)在交互中的应用越来越受到人们的关注。SD可以快速生成大量创意图片，从而提高互联网产品的图片产出效率，提高用户体验和市场竞争力。本文将分享SD在交互中的10个应用案例，希望能够为读者带来一些启发和思考。例1：横幅图片景深交互我们以b站首页为例，制作这样的带景深交互的横幅图片。b站
·2024-02-20 16:11

如何通过AI作画？

网址：https://huggingface.co/spaces/prodia/fast-stable-diffusion模板网址：https://prompthero.com/prompt/96ee86ae9e2
刀锋0001·2024-02-20 15:45

Stable Diffusion 绘画入门教程（webui）

文章目录一、前言二、做出的效果三、SD使用流程1、大模型2、关键字3、调参数一、前言随着mj和sd绘画软件发布之后，AI绘画开始爆火，很多小伙伴已经挖掘出很多的玩法，哪怕最基础的AI美女、AI壁纸、真人漫改等等都赚的盆满钵满，当然现在入局也不算晚，不同的行业基础依然能开发出很多有趣的玩法。随着使用的深入，各路大神挖掘出更多的玩法，比如创意字、艺术二维码、AI幻术、瞬息宇宙等等，当然还有很多玩法，这
wyply115·2024-02-20 13:49

Stable Diffusion 模型下载：FenrisXL（芬里斯XL）

本文收录于《AI绘画从入门到精通》专栏，专栏总目录：点这里。文章目录模型介绍生成案例案例一案例二案例三案例四案例五案例六案例七案例八案例九案例十下载地址模型介绍FenrisXL是一个拟人化的SDXL模型，可以为动物们穿上人类的衣服，深受大家的喜爱。作者述：芬里斯（Fenrisúlfr），芬里尔或古挪威语“Vánagandr”，洛基的长子，预言他将在诸神黄昏中杀死奥丁…这个模型最初是为动物和生物设计
水滴技术·2024-02-20 13:19

Stable Diffusion ComfyUI安装详细教程

上一篇文章介绍了sd-webui的安装教程，但学习一下ComfyUI这种节点流程式的对理解AI绘画有较大帮助，而且后期排查错误会更加方便，熟练后用这种方式做AI绘画可玩性会更多。文章目录一、安装包说明二、安装文件介绍三、安装步骤四、汉化五、云主机外部访问六、学习路径一、安装包说明ComfyUI开源地址如下：https://github.com/comfyanonymous/ComfyUI但国内gi
wyply115·2024-02-20 13:19

stable diffusion官方版本复现

踩了一些坑，来记录下环境CentOSLinuxrelease7.5.1804(Core)服务器RTX3090复现流程按照StableDiffusion的readme下载模型权重、我下载的是stable-diffusion-v1
Zhuanshan_·2024-02-20 13:18

Stable Diffusion WebUI 界面介绍

本文收录于《AI绘画从入门到精通》专栏，专栏总目录：点这里。大家好，我是水滴~~本文主要对StableDiffusionWebUI的界面进行简单的介绍，让你对该WebUI有个大致的了解，为后面的深入学习打下一个基础。主要内容包括：StableDiffusion模型（StableDiffusioncheckpoint）、文生图（txt2img）、图生图（img2img）、附加功能（Extras）、图
水滴技术·2024-02-20 13:18

【AIGC】Stable Diffusion的常见错误

StableDiffusion在使用过程中可能会遇到各种各样的错误。以下是一些常见的错误以及可能的解决方案：模型加载错误：可能出现模型文件损坏或缺失的情况。解决方案包括重新下载模型文件，确保文件完整并放置在正确的位置。依赖项错误：StableDiffusion需要特定的依赖项才能正常运行。确保已经安装了所有必要的依赖项，并且它们的版本与要求的兼容。系统配置问题：有时系统配置可能会影响StableD
AIGCExplore·2024-02-20 13:47

Stable Diffusion 模型下载：Indigo Furry mix（人类与野兽的混合）

本文收录于《AI绘画从入门到精通》专栏，专栏总目录：点这里。文章目录模型介绍生成案例案例一案例二案例三案例四案例五案例六案例七案例八案例九案例十下载地址模型介绍IndigoFurrymix是一个混合模型，出的图具有雄性人类的体型和野兽的形态。条目内容类型大模型基础模型SD1.5来源CIVITAI作者indigowing文件名称indigoFurryMix_v110Realistic.safeten
水滴技术·2024-02-20 13:16

Stable Diffusion 模型下载：Dark Sushi Mix 大颗寿司Mix

本文收录于《AI绘画从入门到精通》专栏，专栏总目录：点这里。文章目录模型介绍生成案例案例一案例二案例三案例四案例五案例六案例七案例八案例九案例十下载地址模型介绍DarkSushiMix大颗寿司Mix是一个动漫大模型，绘制的图片色彩丰富、光影交错、丰富有细节，非常值得推荐给大家。作者述：新版本算是对2.5d的整合，保留整体二次元画风的同时肢体上比前几个版本要好，脸型也要更多样化一点。但光影和线条上就
水滴技术·2024-02-20 13:16

OpenAI Sora视频模型技术原理报告解读

•技术细节写得比较泛（防止别人模仿）大概就是用视觉块编码（visualpatch）的方式，把不同格式的视频统一编码成了用transformer架构能够训练的embeding，然后引入类似diffusion
AI周红伟·2024-02-20 08:58

OpenAI Sora视频生成模型技术报告中英全文+总结+影响分析

技术细节写得比较泛（防止别人模仿）大概就是用视觉块编码（visualpatch）的方式，把不同格式的视频统一编码成了用transformer架构能够训练的embeding，然后引入类似diffusion
龙腾亚太·2024-02-20 08:25

Sora专辑|OpenAI Sora视频生成模型技术报告中英全文+总结+影响分析

•技术细节写得比较泛（防止别人模仿）大概就是用视觉块编码（visualpatch）的方式，把不同格式的视频统一编码成了用transformer架构能够训练的embeding，然后引入类似diffusion
明矛顿了·2024-02-20 08:49

Stable Diffusion XL总结

StableDiffusionXL是一个二阶段的级联扩散模型，包括Base模型和Refiner模型。其中Base模型的主要工作和StableDiffusion一致，具备文生图，图生图，图像inpainting等能力。在Base模型之后，级联了Refiner模型，对Base模型生成的图像Latent特征进行精细化，其本质上是在做图生图的工作。Base模型由U-Net，VAE，CLIPTextEnco
研三小学渣·2024-02-20 03:29

Stable Diffusion模型对比

StableDiffusionV1系列是用基于GPT的CLIP模型，其模型参数量为123.65M；StableDiffusionV2系列则换成了更新更好的OpenCLIP模型，其参数量为354.03M，相比SDV1的TextEncoder模型大了3倍左右StableDiffusionv1：它使用了LAION-2B(en)数据集以及laion-high-resolution和laion-improv
研三小学渣·2024-02-20 03:59

【AIGC】Stable Diffusion安装包

StableDiffusion的安装教程通常分为以下几个步骤：一、安装Python：确保您的系统中已经安装了Python，并且版本符合StableDiffusion的要求。通常情况下，Python版本应为3.6或更高版本。您可以从Python官方网站下载并安装Python：https://www.python.org/downloads/安装PyTorch：StableDiffusion使用PyT
AIGCExplore·2024-02-20 02:27

【AIGC】Stable Diffusion的模型微调

为什么要做模型微调模型微调可以在现有模型的基础上，让AI懂得如何更精确生成/生成特定的风格、概念、角色、姿势、对象。StableDiffusion模型的微调方法通常依赖于您要微调的具体任务和数据。下面是一个通用的微调过程的概述：准备数据集：准备用于微调的数据集。这包括输入图像和相应的标签（如果适用）。确保数据集与您的微调任务相匹配，并且具有足够的样本量和多样性。选择模型：选择要微调的StableD
AIGCExplore·2024-02-20 01:42

【AIGC】Stable Diffusion 的提示词入门

一、正向提示词和反向提示词StableDiffusion中的提示词通常用于指导用户对生成的图像进行控制。这些提示词可以分为正向提示词（PositivePrompts）和反向提示词（NegativePrompts）两类，它们分别影响图像生成过程中的内容和风格。反向提示词注意增加nsfw（notsafeforwork),避免生成办公场所不宜观看内容。二、内容型提示词人物及主体特征服饰穿搭:Whited
AIGCExplore·2024-02-20 01:42

【AIGC】Stable Diffusion插件安装

StableDiffusion的插件安装通常需要遵循以下步骤：第一、查找插件，您需要确定您想要安装的StableDiffusion插件。您可以从StableDiffusion的官方网站或社区论坛上找到各种各样的插件，这些插件可能提供了额外的功能、模型或工具。第二、下载插件，一旦确定了您想要安装的插件，您需要下载插件的安装文件。通常情况下，插件的安装文件会以压缩包的形式提供，您需要将其下载到您的系统
AIGCExplore·2024-02-20 01:42

【AIGC】Stable Diffusion应用领域

StableDiffusion是一个基于OpenAI的Diffusion模型的扩展版本，主要用于图像生成和处理任务。它并不是一个图像分类模型，而是一个生成式模型，可以生成高质量的图像。
AIGCExplore·2024-02-20 01:41

Stable Diffusion系列（六）：原理剖析——从文字到图片的神奇魔法（潜空间篇）

文章目录LDM概述原理模型架构自编码器模型扩散模型条件引导模型图像生成过程实验结果指标定义IS（越大越好）FID（越小越好）训练成本与采样质量分析不带条件的图片生成基于文本的图片生成基于语义框的图片生成基于语义图的图片生成超分辨率图像生成图像重绘其他文生图模型DALL-EImagen在上一章，我们了解了扩散模型的基本原理，但它离实现StableDiffusion的文生图或图生图功能显然还有一段距离
羊城迷鹿·2024-02-20 01:36

【论文精读CVPR_2023】DiffSwap: High-Fidelity and Controllable Face Swapping via 3D-Aware Masked Diffusion

【论文精读CVPR_2023】DiffSwap:High-FidelityandControllableFaceSwappingvia3D-AwareMaskedDiffusion一、前言Abstract1.Introduction2.RelatedWorkFaceSwapping.DiffusionModels.3.Method3.1.Preliminaries:DiffusionModels3
旋转的油纸伞·2024-02-19 22:08

扩散模型的发展过程梳理 多个扩散模型理论知识总结/DDPM去噪扩散概率/IDDPM/DDIM隐式去噪/ADM/SMLD分数扩散/CGD条件扩散/Stable Diffusion稳定扩散/LM

前言1.最近发现自己光探索SDWebUI功能搞了快两个月，但是没有理论基础后面科研路有点难走，所以在师兄的建议下，开始看b站视频学习一下扩散模型，好的一看一个不吱声，一周过去了写个博客总结一下吧，理理思路。不保证下面的内容完全正确，只能说是一个菜鸟的思考和理解，有大佬有正确的理解非常欢迎评论告知，不要骂我不要骂我。2.这里推荐up主，deep_thoughts投稿视频-deep_thoughts视
不学能干嘛·2024-02-19 22:06

【论文精读】Latent Diffusion

摘要Diffusionmodels（DMs）被证明在复杂自然场景的高分辨率图像合成能力优于以往的GAN或autoregressive（AR）transformer。作为基于似然的模型，其没有GAN的模式崩溃和训练不稳定问题，通过参数共享，其可以模拟自然图像的高度复杂分布；另外也不需要AR类模型庞大的参数量，但DM在像素级的训练推理仍然需要大量的计算量，故本文的重点在于在不损害DM性能的情况下减少计
None-D·2024-02-19 22:03
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他