“这篇文章介绍了AI绘画模型，它是利用人工智能技术实现自动绘画的系统，随着人工智能技术的发展，AI绘画模型也在不断演进。文章中介绍了以Diffusion模型为基础的AI绘画模型的最新进展，并给出了一些常用的AI绘画模型的简要介绍。此外，还提供了有关AI绘画模型训练的实用技巧和建议。
AI 绘画模型是一种利用人工智能技术来实现自动绘画的系统。近年来，随着人工智能技术的不断发展，AI 绘画模型也在不断演进。在这篇文章中，我们将介绍以 Diffusion 模型为基础、可以通过文字控制图片生成的 AI 绘画模型的最新进展，并给出一些常用的 AI 绘画模型的简要介绍。此外，我们还将为大家提供有关 AI 绘画模型训练的实用技巧和建议。希望本文能够为读者带来帮助。
Stable Diffusion 系列模型
Stable Diffusion
Stable Diffusion 是一种图像生成模型，于 2022 年 8 月发布，并开源出其所有代码和模型权重。它主要用于生成以文本描述为条件的图像，但它也可以应用于其他任务，例如局部替换 / 擦除（inpainting）、图像外延（outpainting）、图像翻译（img2img）。
由于 Stable Diffusion 是开源算法，并且可以在大部分普通消费级 GPU 上运行，因此得到广泛的应用，国内大部分 AI 绘画产品都是基于 Stable Diffusion 模型。能体验 Stable Diffusion 的地方很多，其模型官方给的模型体验网址是 DreamStudio，国内用户可以用 画宇宙 体验。
NAI Diffusion
NovelAI 是一项在线云端的订阅服务，它使用人工智能算法来协助作者、讲故事和虚拟陪伴。它提供了诸如文本到图像AI艺术生成器和生成新概念和情节线等功能。该服务于2021年6月在beta版中推出，并在2022年10月添加了图像生成功能。Novel AI 推出了 3 款基于 Stable Diffusion 的二次元动漫模型：NAI Diffusion Anime（Curated）、NAI Diffusion Anime（Full）、NAI Diffusion Furry。
如何使用 NovelAI？怎么用ai绘画网站novelai？ai绘画novelai使用教程 一文有详细介绍。自从 NovelAI 大热并引发争议以致 “被开源” 以来过去了两个多月，这期间各大国内外平台多少都吸纳了 novel ai 的模型能力，同时限制了违禁内容的生成，可谓开箱即用，比如「画宇宙」的动漫模型，下面是一些效果展示：
- 兔耳娘 - 画宇宙
- 毛衣女孩 - 画宇宙
- Furry 兔子 - 画宇宙
太乙模型
Stable Diffusion 是基于英文数据训练的，对英文描述语理解会更精准，所以在国内，目前大部分团队主要是基于翻译 API + 英文 stable diffusion 模型进行开发。这会导致 AI 模型对中文语境理解有偏差，IDEA CCNL 团队开源了第一个中文版本的 stable diffusion 模型“太乙 Stable Diffusion”，这个模型可以直接理解中文输入的描述。但由于其训练数据、训练时长有限，效果上有很大局限性。
各种开源的个人训练模型
现有的 Stable Diffusion 模型像是完成了九年义务教育的学生，各科都略懂一些，但都不够专精；但如果给 AI 一些图片，AI 是可以学习到特定的风格或者 IP 形象的，这样的模型像是特定学科的大学生，会在某特定风格、形象上有较好的生成表现。如果可以科学上网，大家可以看看 dreambooth 模型库（177 个模型）、texture-inversion 模型库（600+ 模型）。
看到心仪的模型该怎么使用呢？可以导入 WebUI 使用，也可以试试「画宇宙」的本地私有化部署的方式 ～
其他独立研发模型
Midjourney
Midjourney 是一个独立的研究实验室，其模型可以根据文本描述创建图像，类似于 DALL-E 和 Stable Diffusion。Midjourney 由于其独具一格的效果而备受推崇，目前只能通过 discord 体验 Midjourney 模型，具体方法可以查看 怎么玩ai画画discord网站？ai绘画网站discordcom介绍
Disco Diffusion
Disco Diffusion (DD) 是 Stable Diffusion 开源前最受欢迎的 AI 绘画模型之一，它由 Somnai 创建并由 Gandamu 扩充，并建立在 RiversHaveWings、nshepperd 和其他人的工作之上。其优点是出图色彩绚烂恢弘，缺点是生成慢、占用计算资源多。Disco Diffusion 可以在 https://replicate.com/nightmareai/disco-diffusion 体验，国内用户可以试试 6pen 的西瓜模型。
百度文心 ERNIE-ViLG
作为全球规模最大的中文跨模态生成模型，百度文心 ERNIE-ViLG 模型通过在海量中文数据上训练，让 AI 能直接理解中文语境和中文概念，该模型在中文场景下效果很不错。要试试百度文心模型，那就来「画宇宙」吧 ～
DALLE
DALL-E 由 OpenAI 团队研发，是一个可以通过文本描述中生成图像的人工智能程序。 DALL-E 通过120亿参数版本的GPT-3 Transformer 模型来理解自然语言输入并生成相应的图片。它既可以生成现实的对象，也能够生成现实中不存在的对象。它的名字是2008年动画电影WALL-E和20世纪西班牙加泰罗尼亚画家萨尔瓦多·达利之混成词。
由于 DALL-E 并未开源，要体验只能前往其官网，国内用户偏偏又无法注册其会员；同时其模型效果中上，大部分结果中规中矩，综合来看算是 “食之无味弃之可惜” 的模型。
参考资料：
- 艺术展 - 画宇宙 Creator
- https://openai.com/dall-e-2/
- https://replicate.com/nightmareai/disco-diffusion
- https://www.midjourney.com/
- https://huggingface.co/IDEA-CCNL/Taiyi-Stable-Diffusion-1B-Chinese-v0.1
【原创】
作者：倒立的 BOB
更多精彩内容请访问 ～