MAX Sneaks 2022年度大会完整视频(中字):
(抢先了解一下Adobe研究院正在酝酿的东西。MAX Sneaks是Adobe工程师对潜在的未来技术进行初步了解的地方,这些技术可能会或可能不会进入Adobe产品的未来版本。演员、喜剧演员和企业家凯文-哈特将共同主持Sneaks。)
Adobe刚刚在其年度用户大会Adobe MAX Sneaks 2022会议上预览了两项有趣的实验性AI技术,用于编辑3D场景。
艺术化场景项目将3D场景风格化,改变其照明和纹理以匹配2D参考图像的外观,而 "看到的背后 "项目将单张照片变成360度环境地图。
查看可能很快出现在Adobe软件中的实验性新技术
作为Adobe MAX的年度亮点之一,Sneaks让Adobe展示了其蓝天研究。
今年的会议展示了10个基于人工智能的新图形技术,用于从字体设计到视频编辑的任务,但下面,我们挑出了两个与CG频道读者特别相关的技术。
虽然这两个项目都是研究项目,并不保证在Adobe的软件中使用,但Sneaks确实经常很快进入商业产品。
2020年Sneaks会议的亮点之一,基于物理学的场景布局系统Physics Whiz成为新的布局和渲染工具Substance 3D Stager的一部分,不到一年就发布了。
艺术场景项目将源图像(右图,插图)的外观转移到三维场景(右图,主图),改变其照明和纹理,如左边的图片所示。
艺术化场景项目:将图像的视觉风格转移到3D场景中去
风格转移的想法--将一个图像的视觉风格转移到另一个图像上--并不是一个新的想法。
许多二维图像编辑应用程序,包括Adobe自己的Photoshop,都包括风格转移过滤器,甚至有可能将静止图像的外观转移到视频片段。
艺术场景项目将同样的概念应用于3D,改变3D场景的纹理和照明,使其与2D参考图像相匹配。
它首先从一系列源照片中重建一个3D场景--从Sneaks会话中并不清楚这是否是该过程的必要步骤,或者它是否也能与导入的3D模型一起工作。
然后,用户可以拖入一个参考图像,将其视觉风格应用到3D场景中。
风格的定义相当宽泛:用铅笔素描,Project Artist Scenes给重建的场景一个单色的外观,但不是真正保留源图像的个性。
然而,它能很好地转移源图像的色调和整体情绪,如上面的例子,科幻概念图像被应用于真实城堡的三维重建。
Project Beyond the Seen从一张源照片--在这个Substance 3D Stager场景中的背板--创建了一个360度的全景图(插图),可以用来生成像雕像一样的3D物体的反射。
超越所见的项目:把一张照片变成360度环境图
与此相反,"超越所见 "项目是面向逼真的图像。
该项目将一张单一来源的照片变成一个360度的环境,使用人工智能来填补摄影师视角背后的场景的缺失部分。
虽然Adobe建议它可以用来为虚拟或增强现实项目生成3D环境,但在混合现实中会有明显的扭曲和人工痕迹,会让人分心。
一个更有可能的早期使用案例是为3D场景生成环境图:演示显示了Project Beyond the Seen生成的一个环境在Substance 3D Stager中被应用为一个灯光。
虽然应用的图像是JPEG,而不是HDR,但它在场景中的3D物体上产生了合理的反射。
Project Made in the Shade在图像编辑过程中会自动生成新的阴影:如上图所示,用于将3D模型放入照片中,或者在重新定位原始2D图像的元素时。
其他亮点:用于编辑照片和创建合成物的整洁的新人工智能技术
Sneaks会议还预览了一些有趣的图像编辑技术,它们似乎很适合像Photoshop或Lightroom这样的Adobe应用程序。
Project Clever Composites加速了将元素从一张图片合成到另一张图片的过程,自动将目标对象从其背景中分离出来,缩放它以匹配其新背景,并生成适当的阴影。
Project Made in the Shade对3D物体做了类似的工作,自动调整3D模型的比例以匹配背景图像,然后在照片中的现有物体上产生逼真的阴影。
更令人印象深刻的是,它使用户能够从照片中分离出前景物体,并在图像中重新定位它们,实时自动为它们生成新的阴影。
更多CG资讯请关注:https://www.rrcg.cn/forum-612-1.html
|