ElevenLabs 携手 NVIDIA ACE 发布多语言 AI 语音技术,重塑游戏 NPC 与演讲体验

ADK ElevenLabs官方 / ADK编译 2024-06-02 4 分钟 165 次浏览
速览导读 / Summary

ElevenLabs 与 NVIDIA 宣布深度合作,利用 NVIDIA ACE 技术栈在 Computex 大会上展示突破性多语言 AI 语音能力。Jensen Huang 演示了仅用 7 分钟录音即可生成中英双语演讲,并展示了用于游戏 NPC 的实时交互技术。此次合作旨在打破语言壁垒,提升内容可访问性,并为开发者提供构建数字人类与沉浸式 NPC 的完整工具链。

录音时长 7 分钟 生成双语演讲所需的最少录音时间
生成速度 1 小时 从录音到完成双语演讲的总耗时
技术栈 NVIDIA ACE + ElevenLabs 核心合作技术组合

Key Insights / 核心看点

  • 1 仅用 7 分钟录音即可生成中英双语演讲,实现演讲者声音特质的完美保留。
  • 2 NVIDIA ACE NIM 微服务让开发者能轻松集成 AI NPC,打破传统游戏脚本限制。
  • 3 Covert Protocol 技术演示展示了极具情感变化与真实感的实时语音交互。
  • 4 构建端到端的多语言数字人类解决方案,提升全球内容可访问性。

ElevenLabs 携手 NVIDIA ACE 发布多语言 AI 语音技术,重塑游戏 NPC 与演讲体验

在 Computex 2024 大会上,ElevenLabs 与人工智能基础设施巨头 NVIDIA 宣布了一项具有里程碑意义的战略合作。双方旨在利用 NVIDIA ACE(Accelerated Computing for Emotion)技术栈,结合 ElevenLabs 的专有 AI 语音与语音克隆技术,彻底改变多语言内容创作与数字交互的范式。

突破性的多语言语音合成

本次合作最引人注目的成果是实现了多语言演讲的实时语音克隆。传统的关键note演讲通常依赖人工翻译或字幕来支持多语言受众,而新的解决方案能够保留演讲者的原始声音特质,实现真正的同声传译体验。

在演示环节,NVIDIA 创始人兼 CEO Jensen Huang 亲自示范了这一技术。他利用 ElevenLabs 平台,仅用7 分钟的录音素材,便在1 小时内成功生成了他在英文和中文两种语言下的演讲 AI 声音。这种技术不仅极大地降低了多语言内容制作的时间成本,更让内容能够以极具情感色彩的母语形式触达全球受众。

游戏 NPC 交互的革命

除了演讲领域,该合作还聚焦于游戏行业的非玩家角色(NPC)。传统的 NPC 交互往往局限于简短且预设的脚本,缺乏生命力。借助 NVIDIA ACE 的ACE NIM 微服务,开发者现在可以创建具有高度拟人化特征的动态 NPC。

这些 AI 驱动的 NPC 能够根据玩家的行为实时反应并适应,提供前所未有的沉浸式体验。在 Covert Protocol 技术演示中,ElevenLabs 的语音 AI 被用于驱动这些互动,其声音在语调、音高上的细腻变化获得了现场记者与行业人士的高度评价,被认为是增强玩家沉浸感的关键。

技术架构与生态价值

NVIDIA ACE 是一套旨在让数字人类“活”起来的生成式 AI 技术套件。其核心在于ACE NIM 微服务,这些模块化组件构成了数字人类、AI NPC 和互动虚拟形象的基础。开发者可以直接将这些微服务集成到自己的产品、工具、服务或游戏中,无需从零开始构建底层语音引擎。

ElevenLabs CEO Mati Staniszewski 表示:"NVIDIA 为生成式 AI 革命构建了加速计算基础设施,而我们致力于以可扩展、充满情感且个性化的方式,在任何语言中生成逼真的内容。"

这一合作标志着 AI 语音技术从单纯的文本转语音(TTS)向情感化、多语言、实时交互的下一代应用跨越,为内容创作者和游戏开发者打开了全新的可能性大门。

NVIDIA 为生成式 AI 革命构建了加速计算基础设施,而我们致力于以可扩展、充满情感且个性化的方式,在任何语言中生成逼真的内容。

ElevenLabs CEO Mati Staniszewski

同主题深度资讯

查看更多 →
产品动态 2026-09-15

Topview 发布 Codex 插件工作流:在 ChatGPT 生态内实现 AI 视频生成

Topview 正式宣布其插件工作流集成至 OpenAI 的 Codex 代理系统,支持在本地桌面端或 CLI 中直接调用生成式模型创建 AI 视频。文章详细区分了 ChatGPT 网页版插件目录与 Codex 本地代理的架构差异,明确了安装路径、OAuth 认证流程及 Canvas 画布工作流。该更新旨在解决开发者在 ChatGPT 生态内调用视频生成模型(如 Seedance, Wan 3.0 等)的碎片化问题,强调 Pro 及以上订阅计划对自动化工作流的必要性。

Topview官方 / ADK编译 5 分钟
AI 工具 2026-09-08

Accio Work 2026 安全剃须刀刀片评测指南发布:覆盖敏感肌与硬茬胡须的全场景解决方案

Accio Work 于 2026 年 9 月发布最新评测指南,针对 2026 年湿剃市场的演变,深度解析了 8 款最佳安全剃须刀刀片。指南涵盖从 Astra Superior Platinum 的全能王者到 Feather Hi-Stainless 的极致锋利,特别强调了针对敏感肌肤(如 Derby Extra Super Stainless)和环保需求(如 Personna Lab Blue)的专项解决方案,为不同肤质与胡须类型的用户提供精准选型建议。

Accio Work官方 / ADK编译 3 分钟
AI 工具 2026-09-08

Accio Work 发布厨房研磨工具智能指南:材料选择与性能优化解析

Accio Work 发布了一篇关于研磨钵(Mortar and Pestle)最佳材料选择的深度指南。文章详细对比了花岗岩、大理石、陶瓷、木材及不锈钢等主流材质在研磨性能、耐用性、维护难度及美学风格上的差异。该指南旨在帮助消费者及零售商根据烹饪需求(如香料粉碎、酱汁制作)做出精准决策,体现了 Accio Work 在垂直领域知识库构建与搜索优化方面的技术实力。

Accio Work官方 / ADK编译 3 分钟
AI 工具 2026-09-08

Accio Work 2026 年迷你喷射快艇设计趋势:电动化与模块化重塑水上运动

Accio Work 发布 2026 年迷你喷射快艇设计趋势报告,展示了 9 款重新定义水上运动的新概念。核心亮点包括革命性的充气式电动快艇、热插拔电池系统的通勤者设计、以及专为家庭安全优化的模块化构建方案。这些设计利用先进复合材料与零排放电动动力,解决了传统水上运动便携性差、续航焦虑及安全性不足的问题,为个人娱乐与商业租赁市场提供了全新灵感。

Accio Work官方 / ADK编译 3 分钟
audio · 免费+付费
★ 5.0 · 120评测
E

ElevenLabs

AI文本转语音,支持包含中文在内的29种语言

ElevenLabs 是AI文字转语音平台,为开发者、创作者和企业提供逼真的语音合成解决方案。核心产品包括文本转语音(支持包括中文在内的 29+ 语言、10,000+ 声音)、AI 配音、语音克隆、音乐生成等功能。平台以超低延迟、情感丰富的语音质量著称,广泛应用在有声书、视频配音、客服中心和内容本地化等场景。

查看 ElevenLabs 使用教程与功能