期间:4小时27分钟
语言:英文教程 中文字幕
本课程旨在帮助视觉特效和可视化艺术家深入理解稳定扩散(SD)生成过程,并使用两款功能最强大的基于节点的SD应用程序:ComfyUI和Invoke AI。
在本课程中,您将学习如何构建自定义工作流程,以完成各种任务,例如生成无缝纹理、创建用于数字绘景和合成的元素,或制作全纹理3D资产。
我们将探索SD生成过程的所有基本组成部分,以及各种用于照片级真实感图像的模型、控制网络、预处理器、IP适配器等工具,以及图像修复和放大技术。
通过帮助您精通ComfyUI和InvokeAI,本课程将为您打下坚实的基础,使您能够从零开始设计和构建自己的自定义工作流程,并将生成式AI工具作为视觉特效和可视化工作的得力助手。
无需具备生成式AI、ComfyUI或InvokeAI的先验知识。建议具备Nuke、Maya和Photoshop的基础知识。
Eran Dinur 是一位视觉特效总监(作品包括《马蒂·苏普里姆》、《遗传厄运》、《华尔街之狼》、《原钻》),也是《电影制作人视觉特效指南》和《照片级写实主义完全指南》的作者。
第一课:介绍和设置
我们探讨了使用 ComfyUI 和 InvokeAI 的优势(和挑战),并对这两个应用程序进行了比较。然后,我们搭建了一个完整的 Comfy UI 环境,方便安装复杂的自定义节点及其依赖项。
第二课:SD 基本构建模块
我们在 ComfyUI 中构建了我们的第一个生成式工作流程,探索了稳定扩散过程的基本组成部分(检查点模型、剪辑、采样器、潜在噪声、VAE 解码器),并学习了 CFG、种子和步长等基本控件的功能。
第三课:无缝纹理工具:第一部分
我们开始搭建一个专门的工作流程,用于生成无缝平铺的 3D 纹理。我们学习了 InvokeAI 中各个节点的功能以及如何使用拆分提示。
第四课:无缝纹理工具:第二部分
我们通过添加各种 ControlNet 节点和预处理器来持续改进纹理生成工具,从而能够使用其他图像作为参考。此外,我们还研究了 SDXL 检查点模型的独特功能。
第五课:运用CG元素进行指导:第一部分
我们交替使用 Maya、Nuke 和 ComfyUI 来创建一个现代别墅环境。我们利用美感通道、Z 深度通道和法线通道来精确引导 AI 生成,使其朝着理想的构图和布局发展。
第六课:运用CG元素进行指导:第二部分
我们继续推进别墅项目,使用 Cryptomattes 进行区域提示,并使用 IP 适配器进行照明、风格和氛围控制。
第七课:生成3D资产(第一部分)
我们开始构建一个使用HunYuan模型和封装节点生成全纹理3D模型的完整工作流程。我们将介绍安装和依赖项,然后构建图像到网格和去光照部分。
第八课:生成3D模型(第二部分)
我们继续逐步构建工作流程,包括 AI UV 贴图、多相机设置、纹理投影、展开 UV 以及最终导出纹理网格,并探索多视图渲染器和 CV2 图像修复等工具。
第九课:使用 InvokeAI 进行图像修复
在本课程中,我们将暂时放下基于节点的工作流程,探索 InvokeAI 出色的基于图层的图像修复界面,研究辅助数字绘景和合成任务的不同技术。
第十课:图像分割和放大技术
课程最后,我们将介绍 Florence 模型在图像分割和图像到语言转换方面的应用,然后探讨不同的图像放大技术和工具。


评论(0)