NVIDIA ACE 游戏开发版利用生成式 AI 使虚拟角色栩栩如生

NVIDIA ACE 游戏开发版利用生成式 AI 使虚拟角色栩栩如生

IT资讯 2023-06-08 16:36:02 1年以前

‏‏NVIDIA 宣布推出全新定制 AI 模型代工服务 NVIDIA ACE 游戏‏‏开发版 (‏‏NVIDIA Avatar Cloud Engine (ACE)‏‏ for Game‏‏s)‏‏,利用 AI 驱动的自然语言交互技术,为游戏中的非玩家角色(NPC)带来智能,从而改变游戏体验。‏

‏中间件、工具及游戏开发者可以使用“ACE 游戏开发版 (ACE for Games)”在他们的游戏和应用中建立和部署定制的语音、对话及动画 AI 模型。‏

‏NVIDIA 开发者与性能技术部门副总裁 John Spitzer 表示:“生成式 AI 将彻底改变玩家与游戏人物之间的互动方式,并极大地提高游戏沉浸感。基于我们在 AI 领域的专业知识,加上几十年来与游戏开发者合作的经验,NVIDIA 正率先在游戏中使用生成式 AI。”‏

‏率先在游戏中使用生成式 AI‏

‏在‏‏NVIDIA Omniverse™‏‏ 的基础上,“ACE 游戏开发版 (ACE for Games)”为语音、对话和角色动画提供优化的 AI 基础模型,包括:‏

●‏NVIDIA NeMo™ 大型语言模型(LLM)‏‏ : 使用专有数据构建、自定义和部署语言模型。根据‏‏游戏故事的世界观及人物背景来定制调整 ‏‏LLM,并且通过‏‏NeMo Guardrails‏‏ 来保护对话不会出现产生相反效果或不安全的内容。‏

●‏NVIDIA Riva‏‏ : 用于自动语音识别(ASR)及文本转语音,以启用实时语音对话。 ‏

●‏NVIDIA Omniverse ‏‏Audio2Face‏‏ : 用于配合语音音轨,实时为游戏角色创建脸部表情动画。Audio2Face 搭配用于虚幻引擎 5 的 Omniverse Connector,开发者可以直接将脸部动画添加到 MetaHuman 的角色上。‏

‏开发者可以整合整套 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)”‏‏解决方案,或是单独使用自己需要的组件。‏

‏“Kairos”让人一窥未来游戏发展的样貌‏

‏NVIDIA 和参与‏‏NVIDIA Inception‏‏ 计划的初创公司‏‏Convai‏‏ 合作,展示游戏开发者如何在不久之后使用 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)” 来构建 NPC。Convai 将 ACE 模块与他们的端到端实时虚拟人平台相集成,旨在为虚拟游戏开发尖端的对话式 AI。‏

‏在名为‏‏Kairos‏‏ 的演示中,玩家与拉面店老板 Jin 进行互动。Jin 虽然只是一个 NPC,却能在生成式 AI 的帮助下配合叙事背景,逼真回答自然语言的问题。欢迎观看这个由 Unreal Engine 5 使用最新光线追踪功能和‏‏NVIDIA DLSS‏‏ 渲染出的‏‏演示内容‏‏。‏

‏Convai 创始人兼首席执行官 Purnendu Mukherjee 表示:“Convai 通过使用 ‘NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)’,让我们的工具可以达到所需的延迟和绝佳要求,这样每个开发者便能以低成本的方式使用 AI 打造 NPC。”‏

‏在本地或云部署 NVIDIA ACE 游戏模型‏

‏支持 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)” 的神经网络针对多项功能进行优化,在规模、性能和质量方面进行各种取舍。“ACE 游戏开发版 (ACE for Games)”代工服务将协助开发者微调游戏模型,然后通过 ‏‏NVIDIA DGX™ Cloud‏‏,GeForce RTX™ PC 或现场加以部署,以实时进行推理。‏

‏游戏中沉浸式互动性的交互对延迟有着极为严苛的要求,因此这些模型的延迟性能均调整到最佳状态。‏

‏生成式 AI 将改变游戏体验‏

‏游戏开发者与初创公司已在其工作流上使用 NVIDIA 生成式 AI 技术。‏

1.‏欧洲知名游戏开发者之一的 GSC Game World,将在即将推出的‏‏《潜行者 2:切尔诺贝利之心》(S.T.A.L.K.E.R. 2: Heart of Chornobyl)‏‏中采用 Audio2Face。‏

2.‏独立游戏开发者 Fallen Leaf 用 Audio2Face 来制作‏‏《索利斯堡》(FORT SOLIS)‏‏中角色的脸部动画,‏‏《索利斯堡》(FORT SOLIS)‏‏是一款以火星为‏‏背景‏‏的第三人称科幻惊悚动作游戏。‏

3.‏使用 AI 来制作虚拟角色的 ‏‏Charisma.ai‏‏,通过 Audio2Face 来制作对话引擎中的动画。‏

‏欢迎了解更多使用‏‏NVIDIA ACE‏‏在‏‏NVIDIA Omniverse‏‏上构建的内容,以及‏‏台北国际电脑展‏‏其他最新技术发展。‏

文章版权声明:除非注明,否则均为网络转载文章,转载或复制请以超链接形式并注明出处。

相关阅读

  • 京东上线“20 年回忆录”,可查看个人消费金额、下单总数
  • 辛巴辛有志打通农产品产销通道,推动农村经济发展
  • UIBI 柚比品牌焕新升级,正式推出 SoundPower 户外电源系列产品
  • 年轻人的第一台回音壁 索尼新款轻巧型全景声回音壁 HT-S2000 正式发布
  • 无需高压油箱也可回收汽油蒸汽?比亚迪超级混动技术专利曝光
  • 荣耀赵明:预计 2023 年智能手机出货量约 2.6 亿部,端侧 AI 与大模型未来会有某种程度的结合
  • 曝天玑 9300 将采用全大核 4+4 架构设计,强到大 V 直呼用“魔法”
  • 三星 Galaxy S23 系列与折叠屏等热门产品京东 618 预售首战告捷
  • 苹果 App Store 开发者去年创下 1.1 万亿美元营业与销售额
  • 为企业年中业务添动力,华为云 618 营销季正式开启
  • 特斯联产品体系焕新升级,面向 AGI 时代打造超级智能城市
  • 消息称联发科天玑 9300 处理器 GPU 性能优异,2K 测试场景帧率远超苹果 A16
  • 科技昨夜今晨 0606:苹果 WWDC 2023 开发者大会、刘慈欣自曝用 ChatGPT 写发言稿、黄仁勋称发力 AI 不代表冷落游戏玩家
  • 氦刻 HIK S1 有线耳机,均衡音效解析好,特斯拉动圈展示声音细节魅力
  • 以“数”护“林”,大理市给出新范本
  • 特斯拉诉车顶维权车主侵犯名誉权一案开庭,索赔 500 万元
  • 科大讯飞:将发布“讯飞星火认知大模型”V1.5
  • 科技昨夜今晨 0607:比亚迪“方程豹汽车”注册官方微博、特斯拉诉车顶维权车主侵犯名誉权案开庭、消息称小米 Flip 折叠屏手机立项
  • 华为云 ECS / HECS:中小企业简单上云快一步
  • 已有公司为苹果 Vision Pro 头显制作第三方皮质头带,提供多种颜色选择
  • 最新资讯

    热门资讯