SIGGRAPH 2023 | 贴图帮手:NVIDIA Research 展示生成式 AI 如何帮助创建和编辑逼真的材质

描述

研究人员展示能够快速创建和编辑材质的 AI 技术,助力加速 3D 工作流。

 

 

在 SIGGRAPH 上,NVIDIA 的研究人员展示了一种可以帮助艺术家快速创建和迭代 3D 场景材质的生成式 AI 工作流。

 

这项研究的演示现身 SIGGRAPH 展会 Real-Time Live 活动,展示了艺术家如何利用文本或图像提示来更快地生成织物、木材和石材等自定义纹理材质,同时对创作进行更加精细的把控。NVIDIA Picasso 将提供这些功能,使企业、软件创作者和服务提供商能够使用其经过完全授权的数据来开发自定义生成式 AI 材质模型。

 

这套 AI 模型将促进材质创建和编辑的迭代,使企业能够提供新工具来帮助艺术家快速完善 3D 对象的外观,直到达到想要的效果。

 

在演示中,NVIDIA 研究人员在 AI 的辅助下,像室内设计师一样尝试用 3D 渲染应用制作了一个客厅场景。这次研究人员使用的是 NVIDIA Omniverse USD Composer——一个使用通用场景描述(即 OpenUSD)进行场景组装和构图的参考应用。他们使用这个应用添加带有砖纹理的墙壁,创建和修改沙发与靠垫的织物选项,并在墙壁的特定区域加入一个抽象的动物设计。

 

 

生成式 AI 推动实现设计迭代

 

这次 Real-Time Live 演示结合了几个经过优化的 AI 模型,开发者将能够使用 Picasso 来自定义这些工具,并将其集成到专为艺术家打造的创意应用程序中。

 

在这些功能集成到创意应用中后,艺术家只需要输入简短的文本提示就能生成砖块或马赛克图案等材质。这些材材质可以平铺,所以可以在任何大小的表面上无缝复制。他们还可以导入参考图像,比如一块法兰绒织物,然后将其应用于虚拟场景中的任何对象。

 

AI 编辑工具可以让艺术家修改他们正在处理的材质的特定区域,例如咖啡桌纹理的中心。

 

这些 AI 生成的材质支持符合物理学的渲染,可以逼真地对场景光照的变化作出响应。其所包含的法线、粗糙度和环境遮挡贴图等功能对于创建和微调逼真 3D 场景的材质至关重要。

 

NVIDIA Tensor Core GPU 的加速下,艺术家可以近乎实时地生成材质并在后台升级,可实现高达 4K 的分辨率,同时创作者可以继续完善场景的其他部分。

 

在建筑、游戏开发和室内设计等创意产业中,这些功能可以帮助艺术家快速挖掘创意并尝试不同的美学风格,创造出多个版本的场景。

 

例如,游戏开发者可以使用这些生成式 AI 功能加速开放世界环境设计,或创建角色的服装等。建筑师可以在不同的照明环境中尝试不同风格的建筑立面设计。

 

使用 NVIDIA Picasso 构建生成式 AI 服务

 

这些符合物理学的材质生成功能都将在 NVIDIA Picasso 中提供。NVIDIA Picasso 是一个云平台,企业能够在其上构建、优化和微调用于视觉内容的生成式 AI 基础模型。

 

借助 Picasso,内容提供商能够基于完全授权的版权数据开发并训练生成式 AI 工具和服务。Picasso 隶属于 NVIDIA AI Foundations,NVIDIA AI Foundations 是一套模型制作服务,旨在推动生成式 AI 在文本、视觉内容和生物学领域的应用。

 

在 SIGGRAPH 主题演讲中,NVIDIA 创始人兼首席执行官黄仁勋还宣布了一项新的 Picasso 功能——根据简单的文本或图像提示生成逼真的 360 HDRi 环境贴图,并以此为 3D 场景增色。

 

在 SIGGRAPH Real-Time Live 活动上了解该研究

 

Real-Time Live 是 SIGGRAPH 上最受期待的活动之一。今年,该活动将展示十多个经过评审的项目,包括 Roblox、犹他大学以及 NVIDIA 初创加速计划(旨在培育尖端初创企业的项目)成员 Metaphysic 的项目。

 

在活动中,NVIDIA 的研究人员现场展示了这种交互式材质研究,包括演示超分辨率工具。

 

   

SIGGRAPH 2023 

NVIDIA 精彩发布

  【1】SIGGRAPH 主题演讲:NVIDIA 首席执行官带来生成式 AI 多项创新 SIGGRAPH 2023 | NVIDIA 发布新一代 GH200 Grace Hopper 超级芯片平台 SIGGRAPH 2023 | NVIDIA 发布支持生成式 AI 与 OpenUSD 的重大 Omniverse 升级 SIGGRAPH 2023 | NVIDIA Omniverse 开启通往 OpenUSD 广阔天地的大门 SIGGRAPH 2023 | NVIDIA 与全球数据中心系统制造商大力推动 AI 与工业数字化的发展 SIGGRAPH 2023 | NVIDIA 与全球工作站厂商共同推出用于生成式 AI、LLM 开发、内容创作和数据科学的系统 SIGGRAPH 2023 | NVIDIA AI Workbench 助力全球企业加速采用自定义生成式 AI SIGGRAPH 2023 | NVIDIA 与 Hugging Face 将连接数百万开发者与生成式 AI 超级计算  

更多精彩,仍在继续... 

敬请持续关注

 

 

         点击 “阅读原文”,或扫描下方海报二维码,观看 NVIDIA 创始人兼 CEO 黄仁勋在 SIGGRAPH 现场发表的 NVIDIA 主题演讲回放了解 NVIDIA 的新技术,包括屡获殊荣的研究,OpenUSD 开发,以及最新的 AI 内容创作解决方案。  

 

 


原文标题:SIGGRAPH 2023 | 贴图帮手:NVIDIA Research 展示生成式 AI 如何帮助创建和编辑逼真的材质

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。


打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分