0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

冬日暖心礼 | Toy Jensen AI 演唱送祝福,虚拟人背后技术解读!

NVIDIA英伟达 来源:未知 2022-12-23 22:10 次阅读

今年 11 月,NVIDIA 创始人兼首席执行官黄仁勋在一次活动后偶遇了两位正在直播的歌手,黄仁勋加入其中,为她们的音乐喝彩。新的一年将至,以 AI 打造的实时对话 AI 虚拟化身 Toy Jensen 为大家献曲并送上暖心的节日祝福!

创建 Toy Jensen:

NVIDIA Omniverse Avatar Cloud Engine

这段 Toy Jensen 的表演视频展示了 NVIDIA Omniverse Avatar Cloud Engine (ACE) 平台的部分核心技术。Omniverse ACE 是一个云原生 AI 微服务和工作流的集合。开发者可以使用它轻松构建、自定义和部署引人入胜的交互式虚拟形象。

目前市场上的虚拟化身开发工作需要专业的知识、专业的设备以及大量人手。而 Omniverse ACE 则不同,它建立在 NVIDIA 的统一计算框架 (UCF) 基础上,可以使用更少的代码快速创建和配置AI流程。

NVIDIA 技项目经理 Cyrus Hogg 表示:“这是一项令人惊喜的技术,而我们能够做到这一点也非常了不起。”

Toy Jensen 演唱背后技术揭秘

为了带来一场精彩的表演,NVIDIA 的团队使用最近开发的语音转换模型,从他们提供的样本中提取出专业歌手的声音并将其变成 Toy Jensen 的声音。Toy Jensen 原来的声音是使用数小时的真实录音训练开发而成。这次,团队使用该样本中的音调并将其应用于 Toy Jensen 的数字声音,让虚拟化身以原歌手相同的音调和节奏唱歌。

NVIDIA 的创作团队甚至和曾与 Michael Bublé 和 David Foster 合作过的作曲家兼制作人 Jochem van der Saag 一起为 Toy Jensen 创作了完美的伴奏曲。

NVIDIA 技术项目经理 Cyrus Hogg 表示:“我们请 van der Saag 作曲,并为我们编排这首歌。这很好地弥补了我们团队的不足,我们十分高兴他能够加入。”

虽然将所创建的音乐曲目转换成一个精致的视频只用了几个小时,但 Omniverse ACE 技术背后的团队花了数年时间来开发和调整这段表演中所展示的技术。

Audio2Face 与 Audio2Gesture

实现真实的面部表情和身体动作

NVIDIA 的创作团队使用了 Omniverse ACE,Omniverse Audio2Face 和 Audio2Gesture 技术,仅根据 Toy Jensen 的音频就为这段动画表演生成了逼真的面部表情和身体动作。

ACE 将彻底改变虚拟体验

Toy Jensen 的视频淋漓尽致地展示了 NVIDIA Omniverse ACE 及其如何被应用于各行业的虚拟活动、在线教育和客户服务,并且如何被用于为视频游戏、社交媒体和虚拟现实体验创造个性化的虚拟化身。

暖心互动赢好礼

您认为视频背后的哪项技术最令人惊喜?参与下方投票并评论留言,即可参与活动!

活动截止于 12 月 30 日 早 11点,将抽取 1 位获赞最高的评论,送出 NVIDIA 定制暖冬卫衣一件!


原文标题:冬日暖心礼 | Toy Jensen AI 演唱送祝福,虚拟人背后技术解读!

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    22

    文章

    3862

    浏览量

    92199

原文标题:冬日暖心礼 | Toy Jensen AI 演唱送祝福,虚拟人背后技术解读!

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    相关推荐

    AI技术与PLC编程融合

    如何将AI技术融入PLC编程软件
    发表于 02-14 15:55

    解读 2025 CES 热门 AI 眼镜背后的工作逻辑

    AI眼镜AIglassesAI眼镜正通过将人工智能与传统眼镜相结合,彻底革新可穿戴技术领域。它创造出的智能设备,功能远不止增强现实,更为强大。AI眼镜配备了传感器、摄像头、麦克风和显示屏,能带来无缝
    的头像 发表于 01-17 12:06 621次阅读
    <b class='flag-5'>解读</b> 2025 CES 热门 <b class='flag-5'>AI</b> 眼镜<b class='flag-5'>背后</b>的工作逻辑

    科大讯飞AI虚拟人交互平台荣获行业最高评级

    近日,科大讯飞的AI虚拟人交互平台顺利完成中国信通院人工智能研究所组织的大模型数字人基础能力分级测试,并获得最高等级L5认证,系国内首批。
    的头像 发表于 12-13 11:39 433次阅读

    推出超拟人AI导师,豆神教育窦昕团队展开未来教育模式精彩图景

    据艾瑞咨询发布的报告,AI+教育正迅速渗透到教育的各个层面。为了积极构建AI智能家教体系,提升服务质量,近日,豆神教育窦昕团队发布了豆神辞源大模型“超拟人AI导师”。 发布会现场,窦昕
    的头像 发表于 12-05 16:29 345次阅读
    推出超<b class='flag-5'>拟人</b><b class='flag-5'>AI</b>导师,豆神教育窦昕团队展开未来教育模式精彩图景

    AI智能体逼真模拟人类行为

    近日,据外媒最新报道,斯坦福大学、华盛顿大学与Google DeepMind的科研团队携手合作,成功开发出一种能够高度逼真模拟人类行为的AI智能体。 该智能体的构建得益于研究团队将详细的访谈记录
    的头像 发表于 11-26 10:24 510次阅读

    2024科大讯飞全球1024开发者节官宣

    在这场属于开发者的年度人工智能盛会上,不仅有产学研大咖现场分享,升级行业大模型及更多应用产品,首发多模态视觉交互及超拟人虚拟人交互能力,讯飞星火大模型也将重磅升级发布!
    的头像 发表于 10-14 10:01 878次阅读

    科大讯飞将首发多模态视觉交互及超拟人虚拟人交互

    近日,科大讯飞传来喜讯,第七届世界声博会暨2024科大讯飞全球1024开发者节将于10月24日至27日在合肥盛大举行。
    的头像 发表于 10-11 16:48 423次阅读

    数字王国与AWS达成合作,推动自主虚拟人技术云端发展

    近日,数字王国与Amazon Web Services(AWS)达成了一项重要合作,双方将携手推动自主虚拟人及其技术向云端迁移。
    的头像 发表于 10-09 16:38 489次阅读

    微软Azure AI语音服务革新:引入虚拟人形象,文本一键转生动视频

    微软于8月23日宣布,在其领先的Azure AI语音服务中融入了一项革命性创新——虚拟人形象功能,此功能彻底颠覆了传统交互方式,让文本转视频的过程变得前所未有的直观与生动。
    的头像 发表于 08-23 16:25 799次阅读

    百度发布文大模型4.0 Turbo与飞桨框架3.0,引领AI技术新篇章

    在科技飞速发展的今天,人工智能(AI技术已成为推动社会进步的重要力量。6月28日,百度公司再次站在了AI技术的前沿,其首席技术官、深度学习
    的头像 发表于 06-29 16:03 757次阅读

    数字世界,工程师的虚拟人设打造指南

    我们身处于一个信息爆炸的数字世界,身为数字世界公民,如何有效地融入这个日新月异的数字社会,并赢得数字社会的认可,俨然成为我们共同面临的挑战。在这虚拟的社会中,建立正确的人设,主动建立自己的“数字模型
    的头像 发表于 06-07 08:14 556次阅读
    数字世界,工程师的<b class='flag-5'>虚拟人</b>设打造指南

    融合AI大模型技术,数字人交互更自然、应用更广泛!

    电子发烧友网报道(文/李弯弯)数字人是通过先进的计算机图形学、深度学习等技术创建出的具有高度逼真形象和行为的虚拟人物。AI大模型则是指具有大规模参数量和复杂结构的人工智能模型,能够处理大量的数据
    的头像 发表于 04-27 00:58 3977次阅读

    百度首席技术官王海峰解读大模型的关键技术和最新进展

    4月16日,以“创造未来”为主题的Create 2024百度AI开发者大会在深圳国际会展中心成功举办。百度首席技术官王海峰以“技术筑基,星河璀璨”为题,发表演讲,解读了智能体、代码、多
    的头像 发表于 04-18 09:20 781次阅读
    百度首席<b class='flag-5'>技术</b>官王海峰<b class='flag-5'>解读</b>文<b class='flag-5'>心</b>大模型的关键<b class='flag-5'>技术</b>和最新进展

    抖音严打不当虚拟人AI生成行为,优化平台生态环境

    据悉,去年8月抖音发布了《人工智能生成内容的平台规范及行业倡议》,强调禁止利用AI技术制作虚拟人物进行低质量创作。今年3月27日,抖音安全中心又发布公告表示,发现少数账号依然存在使用AI
    的头像 发表于 03-27 14:54 838次阅读

    NanoEdge AI技术原理、应用场景及优势

    NanoEdge AI 是一种基于边缘计算的人工智能技术,旨在将人工智能算法应用于物联网(IoT)设备和传感器。这种技术的核心思想是将数据处理和分析从云端转移到设备本身,从而减少数据传输延迟、降低
    发表于 03-12 08:09