小惊喜!黄仁勋再创 AI 分身 Toy Jensen,逗趣献唱圣诞金曲

小惊喜!黄仁勋再创 AI 分身 Toy Jensen,逗趣献唱圣诞金曲

辉达(NVIDIA)执行长黄仁勋先前惊喜现身 WirForce 2022 开幕夜现场,随后乱入网络歌手的直播,现在黄仁勋又带给大家一个“圣诞小惊喜”,透过 AI 技术打造虚拟分身“Toy Jensen”,为大家献唱耶诞歌曲。

黄仁勋先前在信义区不小心乱入网络歌手李欣庭(Isteen)和李以乐(Lah)的直播,随后黄仁勋点播《捍卫战士:独行侠》(Top Gun: Maverick)、由 Lady Gaga 唱的主题曲《hold my hand》,但当时她们还不太拿手,所以没在直播中唱出来,她们之后也在自己的 YouTube 频道上重新录制这首歌。

对此,黄仁勋也透过自家 AI 技术献唱《Jingle Bells》,让大家相当惊喜。

辉达指出,虚拟分身 Toy Jensen 透过辉达的 Omniverse Avatar Cloud Engine(ACE)打造,Omniverse ACE 结合云端原生 AI 微服务与工作流程,开发者可以轻松建立、自订和部署相当吸引人的互动虚拟替身。

辉达表示,目前开发虚拟替身需要专业知识、专业设备,并花上许多人工流程,而 Omniverse ACE 不同,它建立在 Omniverse 平台和辉达 Unified Compute Framework(UCF)之上,可用最简单的程式码快速建立和设定 AI 管道。

小惊喜!黄仁勋再创 AI 分身 Toy Jensen,逗趣献唱圣诞金曲 AI与大数据 图2张

此外,辉达团队使用最近开发的语音转换模型,从样本中取出专业歌手的声音,并将其转换为 Toy Jensen 的声音,而这项技术最开始需要耗费数小时,透过实际录音训练而成。随后团队使用样本中的音符,套用作 Toy Jensen 的数位声音,让他唱出与原唱一样的音符和节奏。

同时,团队再利用 NVIDIA Omniverse ACE、Audio2Face 和Audio2Gesture 等技术,加上 Toy Jensen 的声音,让整段表演的面部表情和身体动作变得相当逼真。

辉达称,虽然 Omniverse ACE 技术背后的团队花了数年时间,开发影片中所展示的技术,但透过 Omniverse ACE 这一服务,只需要几个小时就可以生成一个精美的影片。

  • Toy Jensen Rings in Holidays With AI-Powered ‘Jingle Bells’

(首图来源:NVIDIA)

   特别声明    本页内容仅供参考,版权终归原著者所有,若有侵权,请联系我们删除。