cvpr_high-resolution resolution diffusion synthesis

2023CVPR_Spatial-Frequency Mutual Learning for Face Super-Resolution

一. Network:SFMNet 1.网络采用U-Net结构,其中SFMLM-i是不同分辨率的每层结构 2.SPB是空域分支,FRB是频域分支,分别经过FRB和SPB的两个分支信息经过FSIB分支进行信息的融合 3. FRB结构: class FreBlock9(nn.Module): def _ ......

魔导手册 Stable Diffusion 画龙 画坤坤(鲲) 画麒麟

一、选择模型 1、点击Checkpoints 2、拉到最后选择sd-xl-base_1.0 二、开启创作之旅 1、点击Generation 点击Refiner 2、选择 sdxl/sd_xl_refiner_1.0.safetensors(PS 下拉框拉到最后就行啦) 3、输入咒语(正向提示词和反向 ......
Diffusion 手册 Stable

魔导手册 Stable Diffusion 云部署

一、什么是Stable Diffusion Stable Diffusion主要用于 文本生成图像 的深度学习模型,也就是常说的txt2img的应用场景中:通过给定 文本提示词(text prompt),该模型会输出一张匹配提示词的图片。 二、云平台选择 这里选择揽睿星舟,按量计费,非常便宜 点击直 ......
Diffusion 手册 Stable

Windows 11 搭建Stable Diffusion遇到的问题

趁着双11,将我的 i5 4690 + ddr3 4g x 2 换掉了,换成了 AMD 5600 + ddr4 x 2,另外加了个 1t 的 m2的ssd。 原先的硬件部分留下了: 500w的金河田电源 kingston sdd 128g系统启动盘保留 wd blue 1t 也保留下来,但是最近待机 ......
Diffusion Windows Stable 问题 11

[论文阅读] Painterly Image Harmonization using Diffusion Model

Pre title: Painterly Image Harmonization using Diffusion Model accepted: AAAI2023 paper: https://arxiv.org/abs/2212.08846 code: https://github.com/bcm ......

diffuser扩散模型\datawhale组队学习——v6.DDIM和音频

今日学习来源:‍‌⁣‌​⁤‍⁢‬‌‍‍​⁡‍⁤‌​‌​‍‍‬‌‌​​​⁣​⁤⁢⁤​⁢‬‬‌​⁢‍‌‍‬‌⁡《扩散模型从原理到实践》学习手册 - 飞书云文档 (feishu.cn) 任务四 学习内容: 1、DDIM(把小猫变成小狗) 2、音频生成。 首先还是熟悉的环境安装环节,会报错,先把unit1的 ......
datawhale diffuser 模型 音频 DDIM

diffuser扩散模型\datawhale组队学习——v5.SD实战

本周学习文档:‌​⁡⁡⁤​⁡⁤‍‌‌‬‌‌⁡‍⁢⁢‍⁡‬⁣⁢⁡‌‌‍‌⁤⁢‌⁤​⁣‍​⁡​​​​​​​​⁢《扩散模型从原理到实践》学习手册 - 飞书云文档 (feishu.cn) 本周成果: 提示词: full body,(masterpiece),(best quality),Exquisite ......
实战 datawhale diffuser 模型 SD

diffuser扩散模型\datawhale组队学习——v4.

‌⁢⁣‍‌​​‍‌‍⁣⁡⁢​⁣​⁢⁣‬⁣⁢‌‌‍⁤‌‌⁣⁡‬‍​‍⁣⁡⁣​⁣⁢⁤​​‍​《扩散模型从原理到实践》学习手册 - 飞书云文档 (feishu.cn) 本篇文章是对照这篇学习表而跟进的学习笔记,具体而言,进度在这里:实战:创建一个类别条件扩散模型。 !!!!!如果只想交作业的话,把unit ......
datawhale diffuser 模型 v4

简单有效!Direct Inversion: 三行代码提升基于Diffusion的图像编辑效果

前言 本文介绍了由香港中文大学和粤港澳大湾区数字经济院联合提出的基于 Diffusion 的 Inversion 方法 Direct Inversion,可以在现有编辑算法上即插即用,无痛提点。 本文转载自PaperWeekly 作者:KK 仅用于学术分享,若侵权请联系删除 欢迎关注公众号CV技术指 ......

使用 DDPO 在 TRL 中微调 Stable Diffusion 模型

引言 扩散模型 (如 DALL-E 2、Stable Diffusion) 是一类文生图模型,在生成图像 (尤其是有照片级真实感的图像) 方面取得了广泛成功。然而,这些模型生成的图像可能并不总是符合人类偏好或人类意图。因此出现了对齐问题,即如何确保模型的输出与人类偏好 (如“质感”) 一致,或者与那 ......
Diffusion 模型 Stable DDPO TRL

diffusion扩散模型\datawhale组队学习——v3先运行一半

今天我们一起学习如何对模型微调和引导。 微调,用原模型,跑新数据,得到新输出。 引导,引导生成过程,改变输出结果。 作者之前用过sd模型,不同的采样方法在不同的采样步数下有不同的效果。首先采样步数并非越高越好或越低越好,有一个最佳使用区间,其次,不同采样方法有自己不同的最佳采样步数区间。 一般而言3 ......
diffusion datawhale 模型

diffusion扩散模型\datawhale组队学习——v2-抄别人代码还要矫情一下

如果想学diffusion,又没有买纸质书咋办捏? datawhale为我们提供了大佬的中文笔记! 学习来源: https://relph1119.github.io/my-team-learning/#/diffusion_models_learning51/ch03/ch03 甚至比看githu ......
diffusion datawhale 模型 代码 v2

prompt提示工程/diffusion扩散模型/datawhale组队学习///day1 看直播

今日学习来源【纯干货】提示工程(Prompt Engineering)- AI编程新范式_哔哩哔哩_bilibili 抄一下评论区的课代表: - 0:00 📚共识扩散模型学习活动- 6:57 🛠️大圆模型和提示工程- 13:53 💬语言模型和大语言模型- 20:49 🔬GBT3.5和深度学习 ......
diffusion datawhale 模型 prompt 工程

Stable-diffusion WebUI API调用方法

写这篇文章的主要原因是工作中需要写一个用训练好的模型批量生图的脚本,开始是想用python直接加载模型,但后来发现webui的界面中有不少好用的插件和参数,所以最终改成调用WebUI接口的方式来批量生图。 Stable-diffusion的webui界面使用比较方便,但是它的api文档比较简陋,很多 ......

IDM:Implicit Diffusion Models for Continuous Super-Resolution超分辨率

摘要 当今超分辨领域的模型普遍存在过度平滑(难以保持放大后图像的锐利和纹理,导致高频信息丢失和视觉上变得平滑)和伪影(生成的高分辨率图像中可能出现的不希望出现的失真或瑕疵,包括模糊、马赛克效应或者不自然纹理等)的现象,作者据此提出了IDM模型,IDM模型是在一个统一的端到端框架中集成了隐式神经表示和 ......

论文阅读(二)—— Text2Video-Zero: Text-to-Image Diffusion Models are Zero-Shot Video Generators

![image](https://img2023.cnblogs.com/blog/3279428/202310/3279428-20231009200651960-1205649789.png) ![image](https://img2023.cnblogs.com/blog/3279428/2... ......

论文阅读(一)——Adding Conditional Control to Text-to-Image Diffusion Models

![image](https://img2023.cnblogs.com/blog/3279428/202310/3279428-20231009200344161-887129974.png) ![image](https://img2023.cnblogs.com/blog/3279428/20... ......

Stable Diffusion 里 GFPGAN、ESRGAN 和 RealESRGAN 的功能介绍

Stable Diffusion 是一个深度学习技术,主要用于图像生成和图像增强任务。它的核心思想是通过稳定的训练过程来生成高质量的图像,同时提供了一种用于生成和增强图像的框架。在 Stable Diffusion 中,GFPGAN、ESRGAN 和 RealESRGAN 都是与图像生成和增强相关的 ......
RealESRGAN Diffusion 功能 Stable GFPGAN

使用 Stable Diffusion 本地版时遇到显卡驱动过旧的问题

我本地安装了一个 Stable Diffusion,使用它生成图片时,遇到了如下错误消息: BC:\WINDOWS\syst venv "C:\app\stable-diffusion-webui-master\venv\Scripts\Python.exe" Python 3.10.8 (tags ......
显卡驱动 Diffusion 显卡 Stable 问题

Stable Diffusion 本地安装步骤

Stable Diffusion 是一种开源机器学习模型,可以从文本生成图像,根据文本修改图像,或者在低分辨率或低细节图像上填充细节。 Stable Diffusion 已经过数十亿张图像的训练,可以产生与从 DALL-E 2 和 MidJourney 获得的结果相当的结果。 它由 Stabilit ......
Diffusion 步骤 Stable

什么是 Stable Diffusion 中的 Masking

Stable Diffusion 是一种深度学习技术,主要用于生成式对抗网络(GANs)的训练。这一技术旨在提高生成图像和视频的质量和稳定性。Stable Diffusion 引入了一种称为 "masking" 的功能,用于改进训练的效果。在本文中,我将详细介绍 Stable Diffusion 中 ......
Diffusion Masking Stable

Stable Diffusion扩散模型

人像生成模型 1.模型理论基础 扩散模型(Diffusion Model): 1.1 Diffusion Model 原理 首先,Denoise Model 需要一个起始的噪声图像作为输入。这个噪声图像可以是完全随机的,也可以是一些特定的模式(如 高斯分布)或者形状。 - 接下来,随着 denois ......
Diffusion 模型 Stable

diffusers[torch]==0.21.2 torch==2.0.1+cu117 安装失败解决办法

安装失败 主要原因是 pip源 使用索引为官方 使用清华源 设置如下 pip install -r requirements.txt \ --extra-index-url https://download.pytorch.org/whl/cu117 \ -i https://pypi.tuna.t ......
torch diffusers 办法 117 21

Stable Diffusion 的工作原理

Stable Diffusion 是一种深度学习技术,主要用于生成式对抗网络(GANs)的训练。这一技术旨在提高生成图像和视频的质量和稳定性。Stable Diffusion 引入了一种称为 "masking" 的功能,用于改进训练的效果。在本文中,我将详细介绍 Stable Diffusion 中 ......
Diffusion 原理 Stable

Stable Diffusion 的工作原理介绍

Stable Diffusion: 一个强大的生成模型训练工具 Stable Diffusion 是一个强大的生成模型训练工具,它在机器学习领域引起了广泛的关注和研究。该工具的核心思想是通过稳定的梯度流来训练生成模型,从而提高生成图像和数据的质量。本文将详细介绍 Stable Diffusion 的 ......
Diffusion 原理 Stable

stable-diffusion-webui Github 代码仓库的介绍

stable-diffusion-webui:一个基于Web的稳定梯度流生成模型训练工具 stable-diffusion-webui 是一个位于 GitHub 上的开源代码仓库,地址为 https://github.com/AUTOMATIC1111/stable-diffusion-webui。 ......

Ubuntu20.04 ping Temporary failure in name resolution问题

解决步骤 vi /etc/systemd/resolved.conf 将DNS的注释取消掉并改成8.8.8.8即可 参考:https://blog.csdn.net/weixin_43354181/article/details/105352203 ......
resolution Temporary failure Ubuntu 问题

Stable Diffusion基础:精准控制之ControlNet

在AI绘画中精确控制图片的生成是一件比较困难的事情,炼丹师们经常需要大量抽卡才能得到一张满意的图片,不过随着 ControlNet 的诞生,这一问题得到了很大的缓解。 ControlNet 提供了十几种控制网络模型,有的可以控制画面的结构,有的可以控制人物的姿势,还有的可以控制图片的画风,这对于提高 ......
ControlNet Diffusion 基础 Stable

Stable Diffusion基础:ControlNet之重新上色(黑白照片换新颜)

本文给大家分享 Stable Diffusion 的基础能力:ControlNet 之重新上色。 这是一个最近新上的 ControlNet 模型,它可以识别图像中的不同区域,并使用不同的颜色重新绘制它们。 安装 ControlNet 安装 工欲善其事必先利其器,ControlNet 还是先要安装好的 ......
新颜 ControlNet Diffusion 黑白 基础

[IJCAI 2023]Fighting against Organized Fraudsters Using Risk Diffusion-based Parallel Graph Neural Network

[IJCAI 2023]Fighting against Organized Fraudsters Using Risk Diffusion-based Parallel Graph Neural Network 文章设计了一种基于社区的医疗保险欺诈行为检测。 模型 为了提高精度,模型设计了一组异构 ......