Adobe MAX Sneaks 2022年度用户大会 艺术场景3D化技术介绍

MAX Sneaks 2022年度大会完整视频（中字）：

(抢先了解一下Adobe研究院正在酝酿的东西。MAX Sneaks是Adobe工程师对潜在的未来技术进行初步了解的地方，这些技术可能会或可能不会进入Adobe产品的未来版本。演员、喜剧演员和企业家凯文-哈特将共同主持Sneaks。)

Adobe刚刚在其年度用户大会Adobe MAX Sneaks 2022会议上预览了两项有趣的实验性AI技术，用于编辑3D场景。

艺术化场景项目将3D场景风格化，改变其照明和纹理以匹配2D参考图像的外观，而 "看到的背后 "项目将单张照片变成360度环境地图。

查看可能很快出现在Adobe软件中的实验性新技术
作为Adobe MAX的年度亮点之一，Sneaks让Adobe展示了其蓝天研究。

今年的会议展示了10个基于人工智能的新图形技术，用于从字体设计到视频编辑的任务，但下面，我们挑出了两个与CG频道读者特别相关的技术。

虽然这两个项目都是研究项目，并不保证在Adobe的软件中使用，但Sneaks确实经常很快进入商业产品。

2020年Sneaks会议的亮点之一，基于物理学的场景布局系统Physics Whiz成为新的布局和渲染工具Substance 3D Stager的一部分，不到一年就发布了。

艺术场景项目将源图像（右图，插图）的外观转移到三维场景（右图，主图），改变其照明和纹理，如左边的图片所示。

艺术化场景项目：将图像的视觉风格转移到3D场景中去
风格转移的想法--将一个图像的视觉风格转移到另一个图像上--并不是一个新的想法。

许多二维图像编辑应用程序，包括Adobe自己的Photoshop，都包括风格转移过滤器，甚至有可能将静止图像的外观转移到视频片段。

艺术场景项目将同样的概念应用于3D，改变3D场景的纹理和照明，使其与2D参考图像相匹配。

它首先从一系列源照片中重建一个3D场景--从Sneaks会话中并不清楚这是否是该过程的必要步骤，或者它是否也能与导入的3D模型一起工作。

然后，用户可以拖入一个参考图像，将其视觉风格应用到3D场景中。

风格的定义相当宽泛：用铅笔素描，Project Artist Scenes给重建的场景一个单色的外观，但不是真正保留源图像的个性。

然而，它能很好地转移源图像的色调和整体情绪，如上面的例子，科幻概念图像被应用于真实城堡的三维重建。

Project Beyond the Seen从一张源照片--在这个Substance 3D Stager场景中的背板--创建了一个360度的全景图（插图），可以用来生成像雕像一样的3D物体的反射。

超越所见的项目：把一张照片变成360度环境图
与此相反，"超越所见 "项目是面向逼真的图像。

该项目将一张单一来源的照片变成一个360度的环境，使用人工智能来填补摄影师视角背后的场景的缺失部分。

虽然Adobe建议它可以用来为虚拟或增强现实项目生成3D环境，但在混合现实中会有明显的扭曲和人工痕迹，会让人分心。

一个更有可能的早期使用案例是为3D场景生成环境图：演示显示了Project Beyond the Seen生成的一个环境在Substance 3D Stager中被应用为一个灯光。

虽然应用的图像是JPEG，而不是HDR，但它在场景中的3D物体上产生了合理的反射。

Project Made in the Shade在图像编辑过程中会自动生成新的阴影：如上图所示，用于将3D模型放入照片中，或者在重新定位原始2D图像的元素时。

其他亮点：用于编辑照片和创建合成物的整洁的新人工智能技术
Sneaks会议还预览了一些有趣的图像编辑技术，它们似乎很适合像Photoshop或Lightroom这样的Adobe应用程序。

Project Clever Composites加速了将元素从一张图片合成到另一张图片的过程，自动将目标对象从其背景中分离出来，缩放它以匹配其新背景，并生成适当的阴影。

Project Made in the Shade对3D物体做了类似的工作，自动调整3D模型的比例以匹配背景图像，然后在照片中的现有物体上产生逼真的阴影。

更令人印象深刻的是，它使用户能够从照片中分离出前景物体，并在图像中重新定位它们，实时自动为它们生成新的阴影。

更多CG资讯请关注：https://www.rrcg.cn/forum-612-1.html