如何用a i将一张手绘线稿变成一个堪比电影大片的动态分镜#AI手绘动画#AI图生图#AI绘画

雨果奖得主是如何用a i将一张手绘线稿变成一个堪比电影大片的动态分镜的?从业二十年的资深画师用stable fusion的方式和我们这些普通人又有什么区别?对专业的三弟概念设计师来说,a i又是如何落地进入自己的工作流的?作为一名知识区的小透明up主,我和屏幕前的你一样,常常好奇这些工具在真正专业的选手手里用起来到底是什么样的。于是在这期视频里我找到了三位来自不同领域的资深艺术家,来向你解释他们是如何用在g force r t x g p u上运行的a i应用实现自己的工作流的。看完了以后我只想感慨一句,a i能做的事情实在是太酷了。开头我们提到的就是在今年十月颁发的世界科幻最高奖雨果奖中,荣获最佳职业艺术家奖项的插画师赵恩哲老师。他是国内获此殊荣的第一人,被大家誉为插画界的刘慈欣,作品也曾经获得银河奖、星云奖等重量级奖项,是国内科幻绘画领域当之无愧的大师级人物了。

赵老师有一个个人爱好是绘制富有未来感的星际战舰,并时常畅想将这些战舰与心中的世界变成一部大片、一部游戏。从产品的角度看,这在以前靠一个人的生产力是很难实现的,但在各类ai工具的加持下,或许未来可以称为一种可能。以完善这幅名为虚空之舟的作品作为契机,赵老师向我们展示了他使用c body fusion进行概念美术加工的全流程。c body fusion是一个完全免费、开源的ai图像生成模型,在以往的许多视频领域都可以找到它的下载安装和基本操作方法。在这次的案例中,赵老师先在纸上绘制草图来进行概念设计,而细化阶段,他就尝试着将工作交给了人工智能和算力来完成。

std fusion最擅长的就是用草图生成一幅初具规模的成品,将手绘图。拍照扫描后赵老师将它上传到了stable version中的图生图界面,然后在c r r n e t插件里开启soft edge模型对它进行重绘。这其中control也可以借助上传图像特征控制ai生成的图片,而soft edge是其中一种控制类型,很适合概念延展。将手稿导入进去以后,它会利用边缘识别算法对图片进行处理,并以这幅柔和边缘信息图指导a i生成型类似的图片,然后只需要使用提示词简单描述效果,设置合适的模型laura配置各项生成参数。我将赵老师的绘制参数做了一个总结,你可以参考点击生成看,只需要不到几秒钟的时间,就可以得到这样一系列概念设计的成品图了。

stable fusion的这些功能是建立在强大的本地算力基础上的,它在设计师与艺术家间的普及也带动了gpu的算力,成为如今创影业最重要的基础设施之一。在一开始用ai辅助创作的时候,赵老师使用是自己家里的老机器,画一张图就得花上两分多钟时间。为此,七彩虹特意为赵老师提供了搭载g force r t x四零七零显卡的i game ultra家族d i y电脑主机,来帮助它更轻松也更高效地创作出属于他的a i作品。设备更新换代了以后,原先花一张图的时间,现在可以产出十张甚至更多的作品。这对于需要对设计不断调校、反复筛选的艺术家而言,算是一个极大的增益了。

那这个概念设计又是如何变成开头我们看到的那个动画的呢?赵老师使用的是raw真two,一个时下非常流行的在线图片转视频生成服务。它的操作也非常简单,只需要上传一张静态的概念图,然后同样输入提示词来描述片段,点击生成就可以得到一个四秒钟的基于图片演化的动态分镜了。不过rv提供的一次性免费生成额度只有二十五秒,用完了就必须开通会员,十多几次就没有了。但好在现在也有不少免费开源的ai动画生成模型,可以完美复刻真出的效果。例如由s的开发公司推出的s v d,如果你的设备显存在十二gb以上,就可以利用它在comp u i里搭建一个几乎一模一样的本地化图片转视频流水线。

只需要在这里导入图片,设定图片尺寸和生成视频的尺寸帧率,再通过check check point选取s v d模型,然后点击生成,就可以实现和g二类似的图片转动画效果了。通过sample version生成图片,我们最快只需要不到十秒钟就可以生成一张a i加工文的概念图,把它输入到s p d里。转视频则需要花费最快五十秒到几分钟不等的时间,加起来你可以在十分钟内将一个手绘草图转变成一个动态的视频,在分秒间实现想法到成片的飞跃。如果是赵文哲老师的示范为我们展现了ai是如何加速概念美术成型的那接下来这位艺术家的表演就聚焦于商业美术的传统工作流优化了。格子老师是一位拥有二十年绘画经验的民间野生画手,曾经参与制作封神、刺杀小说家、将夜等热门电视剧的海报,作品风格多样且创意独到。

格子老师提供了一套普世化的工作流向。我们展现了插画师可以如何灵活运用ai工具来辅助数码绘画中最耗时耗力的一个环节。线稿上色没错,关于线稿上色,之前我们也做过非常多的教程,线稿是插画师用来起草画面、构思创意的重要方式。一幅插画作品一般就会从一张线稿开始。在节目上色、光影、细节润色等一个个环节加工成成品。

早期纯靠提示词完成的ai绘图作品,总伴随着抽卡。是的,不确定性并不适合细节把控严格并需要频繁改动的商业插画作品绘制。但同样在诸如control等可以实现画面精确控制的工具诞生以后,画师们便只需要专注于利用线稿来塑造画面。而从线稿到成品的工作就可以都留给ai去完成。格子老师就是这么做的,他先在p s里构思创意并起草一幅线稿。

这幅作品的主题是whom i一个凝视显示屏上自己的面孔的背影,展现出了人在面对未来时所感受到的迷茫和对自我身份的审视。完成以后,他将线稿导入stavers中,同样利用control net加载这里格子老师是通过文生图加载的线稿,这样可以完全排除线稿图片本身颜色对生成画面的影响。采用的模型组合是line二和invert,和刚刚赵老师使用的sofa h相比,line arts在完成度更高的线稿上控制效果更为精确。即便有了线稿,生成的具体颜色和细节样式还是会有一定的随机性。而格子老师的操作让我看到了专业选手解决这类问题的办法。

首先他利用同一线稿生成了多张整体结构相同的图片,选择一张最接近理想效果的图片作为底图。如果你的设备显存在十二。这以上可以像格子老师一样,将单批数量设置到四,这样可以同时跑四张图,对大批量抽卡的效率提升是非常显著的这张底图不需要百分之百完美,因为即便有一些细节上的小偏差,我们可以随时在和它结构相似的另一张图片里找到备用方案,然后将那些能用的部分截取出来,拼贴在图上进行修饰。为了确保细节不会因为放大边界而模糊,格子老师还通过后期处理里的swing r r四倍放大算法,将这些图片超分到了四k左右的级别。最后他在这些成品图的基础上又进行了一点点小的加工处理。

一张富有视觉冲击力的插画作品就完成了我们今天要介绍的最后一位艺术家。体现了三弟建模行业对ai的应用。大俊老师是一位blender概念设计师,央美毕业,参与过边境三体画册等项目制作,作品获得过g g a c数字艺术平台大赛的金奖。同时他也是阿里特邀a i创作者,一直致力于探索ai与传统三弟工作流的融合。一个三d艺术作品的创作主要可以被分为建模和贴图两个部分。

你可以简单的把建模理解为给作品塑骨而贴图就是在骨架的基础上用平面图像定义模型表面特征来给它美容。今年以来,技术社区里也出现了许多ai建模的项目,但说句老实话,效果还没有平面图像生成方面这么好大俊老师的工作流呢就为我们提供了一个更加富有实用性的思路,就是a i贴图传统的三维材质贴图需要针对每一个模型单独来设计,给石头安排石头的纹理,木头安排木头的。但也有一些比较复杂的模型,表面的各个部位特点还不一样。所以建模行业发明了u v贴图,将一个复杂的三d模型表面映射到一个平面上。这样只需要在平面图片的不同部分填上不同内容,就可以使用它来塑造复杂的模型外观了。

那这个时候a i在平面图像生成上的优势就可以和建模完美结合在一起。大军老师的做法非常巧妙,首先它在blender里使用各种形状给场景搭建简单的白膜。它构建了一个从洞穴内往外眺望的场景,并设计了金字塔形的主体物和前方的一些遮挡。随后他将这些白膜使用blender的合成器节点导出为深度图,并另外渲染一份没有任何材质的渲染图。将这两幅图同样在输入control里的debt和cami,并利用它们控制生成图像成品看效果非常完美。

如果只是做静态作品的展示,那stability version基本是可以完全取代材质贴图和渲染的步骤了。但一旦要动起来就不行了,因为它只是一个平面的图片。这个时候就要用到我们一开始提到的那个u v贴图的小技巧了。我们只需要把原本场景模型里那些需要贴图的表面给展。开到这张成品里就能用它来装点这个场景了。

具体的做法是在blender里选择所有模型,进入编辑模式以后按a全选。在初始机会上利用uv里的视角投影功能,就能一下子把材质贴到对应位置上,再进行一些简单的光影色彩模式设置,看渲染效果是不是一下子就出来了。从侧面看这个u v实际上是这样的,但在正面它恰到好处的填上了我们能看见的每一个表面。这个方法也不是完美无缺的,在视角发生变化的时候,一些地方的uv贴图会出现类似的穿帮。但我们可以人为的控制这些uv展开以后对应图像的哪些部分,做一些灵活调整,用图片里的其他部分把它自然补齐就可以了。

在完成了这一切以后,大俊老师同样给场景做了一点点细节的丰富。像是加入生动的水面丰富画面的小飞碟,并利用p s在原图基础上加工出背景天空的贴图,再贴上动画,一个非常生动的三维场景就诞生了。这种制作方式还有另一个非常显著的优势,就是切换画风非常方便。因为我们所有的贴图都是被投影到s d生成的这张成品图上的那我们只需要使用不同的模型和提示词产出不同风格的图片来替换这张图片,就可以实时变更整个场景的美术风格。这也是开头的展示里同一个作品的风格可以如此多变的原因,很神奇对吧?在这期视频展示的工作流程里,三位老师都是在搭载了g force e r t x四零系显卡的七彩虹i game ultra家族d i y电脑主机上实现创作的。

艺术家打磨一个作品的过程,就是在将所想及时的转换为所见与所得。在利用ai辅助创作时,速度与性能就成为了一个硬门槛。在tsr、t l c m等先进技术的加持下,使用ai生成图片的速度现在已经可以压缩到一秒技术的级别,极大地方便了他们创作早期的大量风格。探索尝试,甚至还催生了实时绘画等一系列新的创作思路。而扩大生态的护城河也可以帮助他们使用诸如control net等创作必备的精准控制工具,从而兼顾作品输出的高效率和高质量高精度。

另外诸如enemy dive s v d等视频项目对显存也有强需求,这使得n卡用户可以轻松享受价值数百元的付费级应用体验。nvidia g p u的强大性能,在每一位艺术家的创作过程中都是不可忽视的一部分。大全老师也提到了这里各种基于r t x加速的光线追踪和渲染优化功能,对创作的帮助也非常大我相信每一位创意工作者应该都深有体会。看了三位老师分享的创意工作流以后,你有什么感想和收获呢?我发现了一个共同点,他们都是在过硬的专业技能上,再加上ai赋予的强大能力,才造就了高质量作品的高效产出。这说明了什么呢?我想ai不会取代任何艺术家,但优秀的创作者总能用ai工具帮助自己更高效的表达。

而老师们的一点点加工也让我意识到,在真正的艺术创作里,a i绝不是一种速成的捷径。要想更好的驾驭它,同样需要非常扎实的专业基本功。而如果我们将视角再抬高一点,就会发现a i并不仅仅是一个艺术家个体层面的创作工具,还是一种宏观的创作趋势。赵恩哲老师就表示,在游戏影视行业降本增效的背景下,这样的a i应用是非常值得肯定的。他最大的感受就是原来要实现需要很多工作者几个月的努力,现在却可以在几秒钟内呈现在面前。

对于大公司来说,或许这意味着同样的预算可以制造出更丰富的内容,而对于每一位有灵感想创作的个体而言,未来所有艺术创作门槛都会大大降低。那么现在有了sd runway等ai的创作工具,再加上英伟达r t s显卡的强大算力的加持,其实可以最大程度的还原你的想象。在质量和速度上面都能够。更上一个台阶。真正的实现了我心中的秒出世界无限创造的可能性。

我认为这必定是一场艺术及文化领域的重大的工业革命,也可能会迎来新的文艺复兴。未来会出现越来越多的超级个体,会让每个人进入无限创造的时代。以上就是本期工作者分享的全部内容了,对你有帮助的话,请不要忘了一键三连,支持鼓励一下。如果你对其他更多行业的ai创意工作的分享感兴趣,也可以在视频底下留言。我也非常期待在未来可以和更多艺术家一起为你带来富有时间价值的应用分析。

感谢看到最后,这里是您,我们下期再见喽,拜拜。