以ChatGPT为代表的AIGC(人工智能制作内容)技术的兴起,掀起了大众学习AI技术和工具的热潮,除了ChatGPT和GPT-4大型语言模型应用火热之外,通过AI自动生成各种风格的图像的技术也进入人们的视野,这其中包含了Midjourney和Stable Diffusion等。传统的数字艺术中,如果我们要制作人物动画和角色图像,需要做草图,通过3D建模工具进行建模并赋予贴图,同时还需要引入光源和渲染模式,制作工序相当复杂而且耗时较长。然而,AI绘图工具彻底改变了这一切,通过提示词(或者在参考图的引导下)即可迅速生成需要的图像。
基于开源方式的Stable Diffusion由于灵活度和自由度更高,使其得到了广泛的使用,大量基于Stable Diffusion制作的精美图像和视频也出现在各个主流短视频平台上。遗憾的是,市面上系统介绍Stable Diffusion与CoutrolNet结合进行绘画与视频制作的书很少,网络上的知识又呈现碎片化,想要系统掌握Stable Diffusion和ControlNet的应用比较困难。基于此,本书从基础知识着手,详细介绍如何进行工具的安装,如何使用文生图和图生图模块生成相关图像,如何使用提示词,如何结合ControlNet,以及如何使用Deforum等插件进行AI生成视频。总的来说,这是一本端到端关于Stable Diffusion的技术大全,如果读者想从事AI绘画方面的工作或正向着成为AI艺术家而努力,那么阅读这本书就够了。
本书主要包含3个部分,首先是基础知识部分,从人工智能的发展讲述生成式AI的发展历程,以及AIGC的技术栈和当前热门产品,让读者对AI有一个清晰的认识。第二部分介绍Stable Diffusion的主要功能,以及如何使用ControlNet插件对图像进行精细调整,同时结合大量热门技术和方法,详尽介绍如何生成当前主流短视频平台的AI图像。最后一部分介绍如何使用Stable Diffusion结合各类插件和第三方应用进行视频制作,使得非艺术科班的读者也有机会做出和大师媲美的作品。
技术的发展速度超出想象,为了写作本书,笔者收集了大量的信息,以及研究并实践了最先进的AI绘画技术和热门方案,尽力为读者提供翔实的介绍和详尽的操作步骤说明,以期待更多的读者加入AI绘画的队伍中,共同促进AI绘画技术和方案的成熟。
由于编者水平有限,书中难免存在不当之处,敬请广大读者和专家批评指正。
在这里特别感谢王金柱编辑给予的帮助和指导,以及妻子姚女士对我的鼓励和支持。
马健健
2023年7月