AI“读图会意”首超人类！阿里达摩院刷新全球机器视觉问题纪录
国际权威机器视觉问答榜单 VQA Leaderboard出现关键突破：阿里巴巴达摩院以81.26%的准确率创造了新纪录，让AI在“读图会意”上首次超越人类基准。
作者 | 冉启行
编辑 | 陈彩娴
在今年的 SIGGRAPH 上，英伟达大显身手！
近日，在非盈利国际化会员组织 ACM SIGGRAPH 举办的 SIGGRAPH 2021 线上会议中，英伟达展示了 NVIDIA RTX 技术能为 3D 开发者和行业爱好者带来的独家优势。
当地时间 8 月 10 日，NVIDIA 宣布推出 Omniverse ——它是全球首个为元宇宙建立的基础模拟平台，它可以让用户身临其境地连接到虚拟世界中，用户在这里可以创建独一无二的数字场景、完美的 3D 模型、设计精美的建筑等。
为了满足 3D 开发者、爱好者强大的硬件性能需求，NVIDIA 同时推出了 RTX A2000 显卡。在 Omniverse 和 RTX 硬件的双重配合下，英伟达还拿到了 SIGGRAPH 最佳展示奖！
1
Omniverse 应用生态正在迅速成长
为了简化 3D 建模，Omniverse 平台正在不断扩张其应用生态系统。
目前，Omniverse 已支持世界顶尖动画制作工作室 Pixar 推出的 USD（通用场景描述） Blender 3.0版本，创作者们能够在 Omniverse 平台中使用该应用。
NVIDIA 还推出了一个实验性的 Blender alpha 3.0 USD 分支插件，其中包括更高版本的 USD 和素材支持，并将很快面向世界各地的 Blender 用户。
此外，英伟达和 Adobe 正在合作开发一个新的 Substance 3D 插件，该插件将使 Omniverse支持 Substance Material。
使用该插件，用户可以在 Omniverse 中直接调整在 Adobe Substance 3D 中创建或导入的材料，这种方式可以有效节省时间，而不需要用户二次打开软件操作。
另外，在 Omniverse 上，英伟达还增加了一个名为 GANverse 3D – Image2Car 的拓展程序，它可以利用 AI 机制，使 3D 建模变得更容易。
GANverse3D 建立在一个在 2D 照片上训练的生成对抗网络上，合成数千个对象的多个视图来预测 3D 几何、纹理和零件分割标签。这个过程可以将汽车的单张照片变成可以在虚拟场景中行驶的 3D 模型，并配有逼真的前灯、闪光灯和车轮。
GANverse3D 是基于 2D 照片训练的深度学习引擎，它可以根据标准的 2D 图像来创建 3D 模型。例如，它可以将一张汽车照片转换为 3D 模型，该模型甚至可以在虚拟场景中行驶，并配有逼真的前灯、尾灯和车轮。
GANverse3D 是包含在 Omniverse AI Toy Box 的扩展集合中的第一个程序。AI Toy Box （人工智能玩具盒）的应用扩展允许没有经验的 3D 创作者轻松创建场景，且为经验丰富的用户提供多应用程序一体化的体验。
这是 GANverse3D 与 Omniverse 连接工作流程的实际应用，其中包括 Omniverse Create、Reallusion Character Creator 3 和 Adobe Photoshop。
2
RTX A2000 提供 3D 性能支持
NVIDIA RTX A2000 目前已成为面向 3D 创作者最的强大工具，这款 GPU 采用了 NVIDIA Ampere 架构中的最新 RTX 技术，主要包括：
第二代 RT 核心，主要用于实时光线追踪，相比前一代，性能最大提升约 500%。
第三代 Tensor Cores，它为 AI 创造功能提供动力和加速支持。
2 个 PCIe Gen 4 和 6GB GPU ECC内存，将进一步提升 3D 渲染和导出文件速度。
NVIDIA RTX A2000 工作站显卡，桌面版将在 10 月发售。
对于忙碌的开发者来说，拥有 NVIDIA RTX A2000 GPU 的笔记本电脑的确是最高效且最专业的，它为轻薄的 PC 产品带来了光线追踪和 AI 支持。
NVIDIA RTX A2000 GPU 支持多种创造性的工作，包括 3D 建模和 Omniverse，无论是在台式机还是笔记本电脑上，它都可以轻松运行。
如何构建开放“元宇宙”，你想知道的一切 | SIGGRAPH 2021 研讨会
SIGGRAPH 2021在太平洋时间8月9日于线上召开。在此期间，Unreal Engine举办了一场研讨会…
3
NVIDIA 已集成入最新软件更新
最近，一些顶尖的创意应用程序进行了更新，已发布的 NVIDIA Studio 已将其更新内容全部纳入到了驱动程序中，主要包括对于以下三个软件的支持。
Topaz 锐化 AI v3.2 改进了 RTX GPU 和 Tensor Cores 加速的 AI 模型，增加了 1.5 倍的运动模糊的功能，进一步减少了伪影。通过实时处理蒙版笔划和覆盖显示的自定义控件，应用内蒙版也得到了改进。
Reallusion Character Creator v3.43 是第一个集成 Audio2Face 的第三方应用程序，它现在允许创作者将角色从 Character Creator 导出到 Omniverse 中，作为具有 Audio2Face 兼容性的 USD 文件。
它允许面部和唇部动画完全由人工智能驱动，不管语音效果如何，但它的确简化了 3D 角色动画的创作过程。
Capture One 21 v14.3.0 添加了一个新的 Magic Brush 工具，它可以根据图像内容瞬间创建复杂的蒙版，以用于图层编辑。此过程是需要硬件加速的，与 CPU 相比，使用 GPU 时速度最多可提高 3 倍。
软件生态的持续更新，将为 3D 开发者和艺术家们，提供更高效、高质量的创作环境，也将给予 Omniverse 平台更加长久的生命力。
4
软硬结合，英伟达或“最佳展示奖”
最后，值得一提的是，英伟达还凭借数字化身（虚拟人物）的演示，在 SIGGRAPH 上获得了“最佳展示奖”。
NVIDIA 研究团队在硅谷总部进行现场直播时，展示了一系列 AI 模型，这些模型可以在高速网络下，为视频会议和讲故事等项目创建栩栩如生的虚拟角色。
在演示中，一名 NVIDIA 研究员扮演了面试官，面试者则是英伟达的数字化身。NVIDIA研究人员使用的是 RTX 笔记本电脑，另一位数字化身则由 RTX A6000 GPU 台式工作站驱动。
在通话过程中，英伟达展示了人工智能驱动的数字化虚拟人物技术与采访者沟通交流能力。
该演示的特色在于从单张照片生成数字化身，并使用自然的 3D 面部运动为化身制作动画，最后将文本转换为语音进行输出对话。
NVIDIA 应用深度学习研究副总裁 Bryan Catanzaro 在演讲中表示：
“众所周知，制作数字化虚拟人物是一个的困难、乏味和昂贵的过程，但是有了 AI 工具后，就有了一种简单的方法，它可以为真人以及卡通人物创建数字化身，可用于视频会议、讲故事、虚拟助手和许多其他应用程序。”
5
小结
目前，Omniverse 仍处于公测阶段，它对 NVIDIA RTX 和 GeForce RTX GPU 用户免费开放。用户在安装完 NVIDIA Studio 驱动程序后，即可获得更新支持。
英伟达在 Siggraph 上的一系列重磅更新，可谓震惊四座。不过，它能否为元宇宙、 3D 行业真正带来了真正革命性的改变，且让子弹再飞一会儿。
原文链接：
1.https://blogs.nvidia.com/blog/2021/08/10/omniverse-connector-extension-plugin-siggraph/
2.https://blogs.nvidia.com/blog/2021/08/10/siggraph-real-time-live-demo/
风情信息风情信息(公众号：风情信息)风情信息
风情信息特约稿件，未经授权禁止转载。详情见转载须知。
IEEE Fellow李海洲：远渡重洋，万里求索，“机器智能对话”是毕生所求
一直来到实叻坡，乜事无。上山来做工，伯公“多隆”保平安。——潮州过番歌
