以下正文转自CG世界(公众号 ID: World_CG)编辑soso
你是否也曾经在某个爆肝赶工的深夜偷偷设想过,如果Stable Diffusion能够作为Maya的渲染器,那会是什么样子?
Now,感谢科技的力量,又一次让我们梦想成真。接下来登场的这款名为Mandala的插件将AI图片生成工具Stable Diffusion集成到Maya,无需依赖外部工具,就可以在Maya中实现Stable Diffusion的大部分功能!
Mandala AI由Anthropic开发,是一个AI驱动的工具包,用于加速Maya动画工作流程,同时它也为Maya带来强大的新功能:
01AI剧本
通过动画师输入的几行对话,Mandala会生成相应的剧本(包括角色的动作、面部表情等各个方面);动画师可以从中选择自己喜欢的部分直接应用到动画里。
02运用数据清理
Mandala可以自动清理由不同捕捉系统生成的原始运动数据,通过去除噪点和填充遗失的帧来使数据连贯流畅。
是的!如此耗时且乏味的工作,以后可以交给Mandala来帮忙完成了,6!
03基于视频的运动匹配
Mandala可以分析视频里人物的动作,提取关键帧并将其匹配到Maya的角色上,也就是说动画师可以利用现有视频资源,通过AI技术将其转化为Maya动画。
新功能很多,除了以上最吸引人的三个之外,还有像骨骼及表情的自动设置、AI驱动的镜头选择等。
说了功能,下面我们来说说Mandala的几大亮点:
Maya与Stable Diffusion的无缝集成
能够将Maya渲染出的信息像素图直接输入到Stable Diffusion中,只需要轻点几下鼠标,就能自动渲染Canny边缘、Hough线、Sobel边缘以及Openpose类型的关节,并作为ControlNet和Depth2Img工具的条件输入使用。
ControlNet功能
使用该功能,只需3秒就能将一个普通的3D模型转化为质感细腻,光照效果极佳的图像。整个过程完全无需进行繁琐的设置、手动建立连接或是运行其他软件。
Depth2Img功能
与ControlNet类似,但相比ControlNet更加灵活,可以根据输入的深度信息一键生成你想要的任何内容(包括概念艺术创作、纹理图像等)。
纹理生成器
只需要输入简单的提示,纹理生成器就能自动生成对应的高清纹理图片和法线贴图。并且生成的图片可以无缝平铺使用。
相机映射功能
Mandala包含的高级分层相机映射功能,可以检测到相机的视角遮挡情况和视锥范围,并自动生成相应的遮罩信息,轻松为资产打造完美纹理投影效果。
模型管理器
一款功能齐全的机器学习模型管理器,可以添加HuggingFace和Civita等网站的任何模型。重点是→添加进Mandala的模型可以直接使用。
提示编辑器
提供清晰简洁的界面,方便用户编辑AI模型的各种提示输入;同时兼具拼写检查、记录操作历史等功能,并且内置各种提示预设,方便用户快速选择和使用。
渲染视图编辑器
Mandala的渲染视图编辑器完美继承了Maya成熟的操作体系,并对其性能进行了优化。用户可以像在Maya里一样,在Mandala的渲染视图编辑器中进行熟悉的设置和渲染,同时又能获得更加高效和顺畅的使用体验。
修补工具
Mandala的区域渲染功能可以自动修复和修补渲染图像,进行修正与优化。
渲染动画
用户可以通过Mandala新增的渲染动画功能制作各种实验性动画短片。尽管现阶段仅提供单个动画序列渲染,但批量渲染功能已经在开发中,而且目前已经存储的设置和渲染结果都可以在日后直接使用~
Mandala 的出现极大程度上优化了工作流程,提高效率的同时又降低了成本,使动画师们可以有更多的时间和精力专注在创作上。
MANDALA支持Maya 2022-2024,在Gumroad上售价$69,在Highend3D上售价$89。目前官网已经提供下载,感兴趣的小伙伴可以去观摩一下!
附原文网址:https://3dnchu.com/archives/mandala-ai-maya/
介绍及购买网址:https://www.highend3d.com/maya/plugin/mandala-a-stable-diffusion-renderer-for-maya
版权声明 | 文章整理自网络,仅供学习参考,版权归属原作所有
如有问题,请及时与我们联系,我们将第一时间做出处理