理解Stable Diffusion、LoRA、Dreambooth、Hypernetworks、Textual Inversion、Checkpoint
前言 在深度学习和人工智能的领域中，模型生成和调整技术的快速发展为创造性内容的自动化提供了新的可能性。本文将介绍四种重要的模型技术——Stable Diffusion、LoRA、Dreambooth、和Hypernetworks——它们在生成艺术、个性化模型调整和网络结构设计方面各自的特点和应用。 Stable Diffusion：图片生成的革新者 Stable Diffusion是...
Stable diffusion 和 Midjourney 怎么选？
选择其实很简单，两者成图各有侧重。 特点： Stable diffusion 更擅长局部修改，操作更加复杂，可控性强，但瑕疵多，难以一次完美。 Midjourney 张张精品，上手容易，局部修改效果不佳，往往需要多次生成结果。如果需要生成某一类作品，只要成功一次以后，再做就简单很多了。比如人物头像。另外有一些限制，作为公司产品，有一些类似图片，比如儿童，色情图片是不能够生成的。 两者的选择不仅仅看作品效果，还要看...
菜鸟初进stable diffusion
不知道是不是玩novelai被boss看到了，推荐了我学stable diffusion 扩散模型 DALL E Midjourney stable diffusion latent diffusion 说是改进点在于“给输入图片压缩降低维度，所以有个latent，从而减少计算量”，类似于下采样吧，编码后在特征空间搞动作，而不是像diffusion那样直接在像素上搞动作。当然减少计算量的代价就是细节的丢失。 -》...
利用GPU加速自定义风格图像生成-利用GPU加速结合了ControlNet/ Lora的Stable Diffusion XL
内容的图像, 我们还会介绍如何利用Lora来控制图像风格。我们希望你在此学习过程中找到跟踪AI发展的灵感，并鼓励你进行更多的实践和探索。 通过本次研讨会, 您将了解到: 生成式AI模型 Stable DiffusionXL的基本原理TensorRT 推理引擎的工作原理和TensorRT9的最新特性利用TensorRT推理引擎加速Stable DiffusionXL的方法代码实战: 利用ControlNet和Lora...
Stable Diffusion中的Embeddings
维空间中的点，可以捕捉数据的关键特征和属性。在文本处理中，例如，embeddings可以捕捉单词或短语之间的语义关系，而在图像处理中，它们可以表示图像的视觉内容。 Embeddings在Stable Diffusion中的角色 Stable Diffusion是一种基于深度学习的图像生成模型，它使用embeddings来理解和生成图像。该模型通过将文本描述转换为文本嵌入（文本embeddings），...
理解 Stable Diffusion、模型检查点(ckpt)和变分自编码器(VAE)
前言 在探索深度学习和人工智能领域的旅途中，理解Stable Diffusion、模型检查点(ckpt)以及变分自编码器(VAE)之间的关系至关重要。这些组件共同构成了当下一些最先进图像生成系统的基础。本文将为初学者提供一个详细的概述，帮助您理解这些概念以及它们是如何协同工作的。 Stable Diffusion 模型简介 Stable Diffusion 是一个用于生成和修改图像的...
Stable Diffusion中不同的采样方法
在 Stable Diffusion 模型中，采样方法是从学习到的概率分布中生成图像的算法。采样方法影响生成图像的质量、样式、速度以及过程的控制程度。以下是一些采样方法的概述和它们对图像生成可能产生的影响： DPM++系列 DPM++ 2M / 3M: 这些是扩展的扩散概率模型，其中数字表示模型使用的标记步数（例如2M表示200万步）。步数越多，通常生成的图像细节和质量越高，但需要更长的计算时间。D...
Stable Diffusion 动画SD-Animatediff V2
AI不仅可以生成令人惊叹的图片，还能给这些图片注入生命，让它们动起来。 这就是AnimateDiff要做的事情，一个神奇的工具，能将静态的AI生成图像转换成动画。 本次介绍基于SD如何实现这个神奇的方法。 文章目录 插件安装 使用方法 参数调整 文生动图/视频 Controlnet方法 SD API方法 错误总结 插件安装 进入SD页面在扩展下输入网址https://github.com/continue-rev...
Stable Diffusion 动画animatediff-cli-prompt-travel
基于 sd-webui-animatediff 生成动画或者动态图的基础功能，animatediff-cli-prompt-travel突破了部分限制，能让视频生成的时间更长，并且能加入controlnet和提示词信息控制每个片段，并不像之前 sd-webui-animatediff 的一套关键词控制全部画面。 动图太大传不上来，凑合看每一帧的图片吧。 目前该方法没有Web UI界面，全部都是由命令行完成，因此需...
论文学习——Class-Conditioned Latent Diffusion Model For DCASE 2023
文章目录 引言正文AbstractIntroductionSystem Overview2.1 Latent Diffusion with sound-class-based conditioning以声音类别为条件的潜在扩散模型2.2 Variational Autoencoder and neural vocoder变分自编码器和神经声码器FAD-oriented Postprocessing filter（...