NVIDIA Edify 为视觉内容提供商解锁 3D 生成 AI 和新图像控件

2024-03-21 05:28

本文主要是介绍NVIDIA Edify 为视觉内容提供商解锁 3D 生成 AI 和新图像控件,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

NVIDIA Edify 为视觉内容提供商解锁 3D 生成 AI 和新图像控件

Shutterstock 3D 一代进入抢先体验阶段; Getty Images 为企业推出定制微调; Adobe 将为 Firefly 和 Creative Cloud 创作者带来 3D 生成人工智能技术; Be.Live、Bria 和 Cuebric 选择 NVIDIA Picasso AI Foundry 进行推理。

在这里插入图片描述

NVIDIA Edify 是一种用于视觉生成 AI 的多模式架构,正在进入一个新的维度。

3D 资产生成是 Edify 为开发人员和视觉内容提供商提供的最新功能之一,他们还能够对 AI 图像生成发挥更多的创造性控制。

多媒体内容和数据提供商 Shutterstock 正在推出对 API 或应用程序编程接口的早期访问,该接口基于 Edify 架构构建,允许创作者使用文本提示或图像快速生成虚拟场景的 3D 对象。

视觉内容创建者和市场 Getty Images 将为其商业安全的生成式人工智能服务添加自定义微调功能,帮助企业客户生成符合品牌准则和风格的视觉效果。 该服务还将融入新功能,使客户能够进一步控制其生成的图像。

开发人员可以通过 NVIDIA NIM(今天在 NVIDIA GTC 上宣布的一组用于推理的微服务)测试驱动 Getty Images 和 Shutterstock 提供的预训练 Edify 模型作为 API。 开发人员还可以通过 NVIDIA Picasso(基于 NVIDIA DGX Cloud 构建的 AI 铸造厂)使用 Edify 架构来训练和部署自己的生成式 AI 模型。

NVIDIA 和 Adobe 正在合作,为数百万 Firefly 和 Creative Cloud 创作者带来基于 Edify 的全新 3D 生成 AI 技术。

直播平台 Be.Live 使用 NVIDIA Picasso 代工服务来提供实时生成 AI,从而能够自动创建视觉效果并为观众提供互动体验。 Bria 是一个为开发负责任的视觉生成人工智能的企业量身定制的整体平台,它采用了 Picasso 来运行推理。 创意工作室 Cuebric 正在通过开发由毕加索驱动的生成式人工智能应用程序来构建沉浸式虚拟环境,从而增强电影制作和内容创作。

Speedy 3D:Shutterstock 3D AI 生成器现已提供抢先体验
Shutterstock 的 3D AI 服务现已开放抢先体验,将使创作者能够生成用于布景和构思的虚拟对象。 此功能可以大大减少场景原型所需的时间,让艺术家有更多时间专注于英雄角色和物体。

使用这些工具,创意专业人士将能够根据文本提示或参考图像快速创建资源,并从一系列流行的 3D 格式中进行选择来导出文件。 基于 Edify 3D 的服务还将配备内置保护措施来过滤生成的内容。

商业安全模型是根据 Shutterstock 的许可数据进行训练的。 Shutterstock 已经向数十万艺术家提供了补偿,预计还会有数百万人获得补偿,以表彰他们的内容知识产权在培训生成技术方面所发挥的作用。

在这里插入图片描述

在 GTC 上,HP 和 Shutterstock 展示了一项合作,利用 Edify 3D 增强定制 3D 打印,为设计师提供无限的原型选择。

Shutterstock 的 3D AI 生成器使设计人员能够快速迭代概念,创建数字资产,HP 可以通过自动化工作流程将其转换为可 3D 打印模型。 然后,HP 3D 打印机会将这些模型转化为物理原型,以帮助激发产品设计灵感。

Mattel 正在启用 Shutterstock 的 3D 生成人工智能功能,可以加速设计构思过程。 借助人工智能工具,玩具设计师可以通过简单的文字描述将他们的新产品创意形象化。 通过降低创建高保真概念设计的技术障碍,设计师可以探索更广泛的想法并更快地迭代。

Shutterstock 还在构建基于 Edify 的工具,使用根据文本或图像提示生成的 360 HDRi 环境来照亮 3D 场景。

达索系统通过其用于 3D 内容创建的领先 3DEXCITE 应用程序和 CGI 工作室 Katana 将 Shutterstock 生成 360 HDRi API 纳入其基于 NVIDIA Omniverse 的工作流程,NVIDIA Omniverse 是一个用于开发基于通用场景描述 (OpenUSD) 的 3D 工作流程和应用程序的计算平台。

全球最大的科技创意集团 Accenture Song 正在使用 Omniverse 平台根据计算机辅助设计数据生成高保真 Defender 车辆,以用于营销目的。 与 Edify 提供支持的生成式 AI 微服务相结合,Accenture Song 能够通过对话提示创建电影般的交互式 3D 环境。 其结果是一个完全身临其境的 3D 场景,将现实生成的环境与 Defender 车辆的数字双胞胎相协调。

掌控一切:通过 Getty Images 的定制微调将创意愿景变为现实

Getty Images 继续扩展其商业安全的生成人工智能服务所提供的功能,该服务为用户生成的内容提供赔偿。

在 1 月份的 CES 展会上,Getty Images 发布了由 Edify 支持的 API,用于修复(添加、删除或替换图像中的对象)和修复(扩展创意画布)。 这些功能现已在 Gettyimages.com 和 iStock.com 上提供。

从 5 月开始,Getty Images 还将提供根据公司品牌和视觉风格定制微调 Edify 基础模型的服务。

这些服务将采用无代码的自助服务方法,供公司上传专有数据集、查看自动生成的标签、提交微调任务并在部署到生产之前查看结果。

作为定制微调工具的一部分,Getty Images 将发布一系列 API,提供对图像输出的更精细控制,这是生成 AI 中最大的挑战之一。

开发人员很快将能够访问草图、深度和分割功能,这些功能允许用户提供草图来指导人工智能的图像生成; 通过深度图复制参考图像的组成; 以及分割图像的一部分以添加、删除或修饰字符或对象。

  • Getty Images 的 API 服务已被领先的创意人员和广告商使用,包括:

  • Dentsu Inc.:这家日本广告公司正在使用 Getty Images 的生成式 AI API 服务来支持 MAFA:Manga Anime For All,这是一款可以为营销用例创建漫画和动漫风格内容的应用程序。 Dentsu Creative 还使用 NVIDIA Picasso 为领先的会员仓储零售商 Sam’s Club 微调 Getty Images 的模型。

  • McCann:这家创意机构利用生成式 AI 帮助其客户利洁时 (Reckitt) 的非处方感冒药 Mucinex 开发一款创新游戏,在游戏中客户可以与该品牌的吉祥物互动。

  • Refik Anadol Studio:该工作室以在艺术作品中使用生成式人工智能而闻名,将在 GTC 上展示雨林风格的艺术装置,该装置是使用 Getty Images 的人工智能模型创建的,并与 Refik 的雨林目录进行了微调。

  • WPP:这家营销和传播服务公司正在与可口可乐公司合作,探索如何微调 Getty Images 的模型来帮助构建符合品牌风格和准则的定制视觉效果。

在这里插入图片描述

这篇关于NVIDIA Edify 为视觉内容提供商解锁 3D 生成 AI 和新图像控件的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/831857

相关文章

MySQL中动态生成SQL语句去掉所有字段的空格的操作方法

《MySQL中动态生成SQL语句去掉所有字段的空格的操作方法》在数据库管理过程中,我们常常会遇到需要对表中字段进行清洗和整理的情况,本文将详细介绍如何在MySQL中动态生成SQL语句来去掉所有字段的空... 目录在mysql中动态生成SQL语句去掉所有字段的空格准备工作原理分析动态生成SQL语句在MySQL

Java利用docx4j+Freemarker生成word文档

《Java利用docx4j+Freemarker生成word文档》这篇文章主要为大家详细介绍了Java如何利用docx4j+Freemarker生成word文档,文中的示例代码讲解详细,感兴趣的小伙伴... 目录技术方案maven依赖创建模板文件实现代码技术方案Java 1.8 + docx4j + Fr

Python将博客内容html导出为Markdown格式

《Python将博客内容html导出为Markdown格式》Python将博客内容html导出为Markdown格式,通过博客url地址抓取文章,分析并提取出文章标题和内容,将内容构建成html,再转... 目录一、为什么要搞?二、准备如何搞?三、说搞咱就搞!抓取文章提取内容构建html转存markdown

Java编译生成多个.class文件的原理和作用

《Java编译生成多个.class文件的原理和作用》作为一名经验丰富的开发者,在Java项目中执行编译后,可能会发现一个.java源文件有时会产生多个.class文件,从技术实现层面详细剖析这一现象... 目录一、内部类机制与.class文件生成成员内部类(常规内部类)局部内部类(方法内部类)匿名内部类二、

使用Jackson进行JSON生成与解析的新手指南

《使用Jackson进行JSON生成与解析的新手指南》这篇文章主要为大家详细介绍了如何使用Jackson进行JSON生成与解析处理,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录1. 核心依赖2. 基础用法2.1 对象转 jsON(序列化)2.2 JSON 转对象(反序列化)3.

java中使用POI生成Excel并导出过程

《java中使用POI生成Excel并导出过程》:本文主要介绍java中使用POI生成Excel并导出过程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录需求说明及实现方式需求完成通用代码版本1版本2结果展示type参数为atype参数为b总结注:本文章中代码均为

在java中如何将inputStream对象转换为File对象(不生成本地文件)

《在java中如何将inputStream对象转换为File对象(不生成本地文件)》:本文主要介绍在java中如何将inputStream对象转换为File对象(不生成本地文件),具有很好的参考价... 目录需求说明问题解决总结需求说明在后端中通过POI生成Excel文件流,将输出流(outputStre

基于Flask框架添加多个AI模型的API并进行交互

《基于Flask框架添加多个AI模型的API并进行交互》:本文主要介绍如何基于Flask框架开发AI模型API管理系统,允许用户添加、删除不同AI模型的API密钥,感兴趣的可以了解下... 目录1. 概述2. 后端代码说明2.1 依赖库导入2.2 应用初始化2.3 API 存储字典2.4 路由函数2.5 应

使用Python实现获取网页指定内容

《使用Python实现获取网页指定内容》在当今互联网时代,网页数据抓取是一项非常重要的技能,本文将带你从零开始学习如何使用Python获取网页中的指定内容,希望对大家有所帮助... 目录引言1. 网页抓取的基本概念2. python中的网页抓取库3. 安装必要的库4. 发送HTTP请求并获取网页内容5. 解

Python实现常用文本内容提取

《Python实现常用文本内容提取》在日常工作和学习中,我们经常需要从PDF、Word文档中提取文本,本文将介绍如何使用Python编写一个文本内容提取工具,有需要的小伙伴可以参考下... 目录一、引言二、文本内容提取的原理三、文本内容提取的设计四、文本内容提取的实现五、完整代码示例一、引言在日常工作和学