还记得前几天给大家推荐过的RODIN和Picasso嘛?这两个应用,前者是可利用照片生成模型的3D数据训练扩散模型,由微软亚洲研究院推出,后者是由英伟达推出的、可搭载自定义生成式AI的云服务平台,其中有一项操作,由Shutterstock与Nvidia合作训练,可通过文本生成3D模型。
RODIN:2D照片生成3D模型
Shutterstock+Picasso=文生3D模型
你以为这就是生成式AI的极限了吗?NO!今天给大家介绍另一款应用名叫pix2pix3D(直译为3D感知条件图像合成),当你给它一个四不像的涂鸦,哪怕是妈见打、鬼见愁的那种,它能通过一系列神奇的算法,将其还原成为2D图像或3D模型。
这个应用由卡内基梅隆大学的研究人员开发,能够帮助初学者和专业设计师创建从定制家用家具到游戏内容等在内的各种3D虚拟模型。如下图所示,你只需提供简略的素描草图,然后系统将会为你生成相关的3D模型。
而且这个工具还有一个实时交互、在线改稿的功能。一方面,用户可以下载预训练模型后,根据系统提供的脚本来生成结果;另一方面,用户还可以通过擦除和重新绘制原始2D草图来对模型进行实时修改,而且它为用户提供了更多的自由度来自定义和细化图像,无需重新渲染整个项目。
根据Pix2pix3d在Github上的产品描述,该应用目前已经做过汽车、猫及人脸等在内的多项数据集训练,团队正在努力扩展模型能力。未来,它将有可能被应用于消费品设计、家具定制、构建虚拟现实环境或游戏中的模型物品,或为电影、短视频等添加特殊效果。
有了这个工具,好像再也不怕客户手残了?他只要敢画出来,咱就能把效果图做出来!
版权声明 | 文章整理自网络,仅供学习参考,版权归属原作所有
如有问题,请及时与我们联系,我们将第一时间做出处理