0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

有了Siren之后,会带来哪些改变?

物联网之声 来源:未知 作者:李倩 2018-06-06 17:16 次阅读

朱唇轻启,嘴角含笑,这半张脸很普通。

而整个人,看上去也很普通。

但她不普通,因为,她,不是人。

作为数字虚拟人,她有自己的名字,Siren,意为古希腊传说中半人半鸟的女海妖。

由腾讯互娱事业群的NEXT Studio 与Epic Games、Cubic Motion和3Lateral等业内各领域顶尖公司联合团队开发而成。

她,实际上也是人。

她的面部形象,来自于中国的女演员姜冰洁。

但Siren也可以是所有人,她能够惟妙惟肖地“演绎”出其他人的表情,包括你的。

这项成果代表了目前实时渲染技术的业界顶尖水平。

Siren所有的动作表情都是实时捕捉并实时渲染。

只要将这套动捕设备,戴在你头上。它能实时跟踪200多个面部特征点,并将这些数据实时地映射到Siren的面部Rig(骨骼绑定)驱动Siren的3D脸部模型。

动作表情以每秒60帧输出在屏幕上。

最最重点的是——数字虚拟人是可以基于任何人的样子进行扫描,扫描之后,TA就是被扫描者的复刻和分身了。

而驱动这一数字虚拟人的表情和动作的,可以是其他人。

这样,很多奇妙的事情就可以发生了。

周杰伦曾经幻想,能穿越时空,回到30年前,跟邓丽君合唱一首歌。

他说:那是多么荣幸的一件事啊。

30年后,他真的,跟她,隔空对唱。

周杰伦没有想到——这场机缘来自科技,是45名工程师耗2个月心血打造,这场重逢,让两个时代的歌手,在万千目光中,共谱了一曲。

《速度与激情7》里,保罗·沃克在不幸离世前,电影只拍完了八成左右的戏份,剧组是如何处理余下未拍摄的呢?

导演只好用CG方式来制作数字替身,辅以3D跟踪和相机运动匹配来完成剩余镜头,他还找来沃克的兄弟拍摄沃克的戏份。

影片的结尾,导演把保罗之前的影像剪辑到一起,给影迷一份深刻动人的完美怀念。

过去,让逝去的人重生,仿佛是一个无法实现的梦。科技让一切变得可能。

Siren的出现,可以让人物“还原”,变得更简单。

如果说3D“邓丽君”、“保罗”像电影特效制作一样,是一帧帧通过离线渲染抠出来的,那么Siren则是实时渲染出来的,可以实时互动。

这个过程在15毫秒内完成,一般人几乎感受不到延迟。

而为了追相片级的表现,整个开发过程,团队都需要在不同光照条件和相机位置下对比真实照片和引擎渲染结果,一点点修正。

换衣服对于她来说,就是挥挥手,抖三抖的事

现在Siren不管是高精度的面部动捕,还有长时间的身体动作捕捉,都一步步的做到尽可能的接近真实。

有了它,你可以和任何一个“人”实时互动交流。

那么有了Siren之后,会带来哪些改变?

我们可以大胆想象,未来,你也可以像《头号玩家》里的主人公一样,将自己的一举一动映射到虚拟角色身上,他是通过魔幻眼镜完成自由变身,而你通过Siren,完成置换。

除了在游戏中感受虚拟人的魅力,Siren在影视方向的想象空间也很大。

要知道,从替身到抠像,从人皮面具到真人倒模,在这些方面,电影的创意可谓层出不穷。

有了Siren之后,你再也不用担心这些流量小花鲜肉的演技了,形象扫一扫,剩下的表情驱动请交给真正的“演技派”。

当然对于老艺术家,我们也可以在他们年轻时,用数字化技术将他们定格在最美的时候,让他们的才华在艺术作品中以最鲜活的姿态存在。

除了成为“复刻”的明星,Siren本身是不是也可以成为全能偶像?

完全可以啊。初音未来多火不用说,洛天依的名字你想必也不陌生,那么对于更真实的Siren,潜力更是无限。

出个MV,上综艺,甚至开演唱会,代言游戏都不是问题,如果被赋予人工智能,能够想象的空间足够大。

你也可以成为虚拟主播?

脱离各种后期加持,无需动漫制作,告别滤镜、医美,面对最考验实时技术的直播,相信Siren小姐姐,也能应付自如,不用录播,人设就立在那里。

可能你所看到的女性Siren背后,驱动的是一个抠脚大汉呢。

还能变身智能语音助手?

Siren现在还需要真人驱动,未来,是否可以由AI驱动?那么想象家里像《银翼杀手》里,有一个虚拟伴侣或助手,想必很奇妙,叫你起床,关照你增添衣物,家里的一切因为她而变得舒心,感觉拥有了一个田螺姑娘呢。

“高保真,实时渲染,可交互,虚拟数字人....."

这些技术亮点背后,是Project Siren背后站着的一群人带来的尝试。

这群由腾讯互娱事业群的NEXT Studio 与业内各领域顶尖公司联合组成的开发团队,正努力锻造超真实虚拟偶像的可能性。

未来,充满不确定性和挑战,我们期待Siren的再一次“改变”。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 3D
    3D
    +关注

    关注

    9

    文章

    2863

    浏览量

    107334
  • 数字化
    +关注

    关注

    8

    文章

    8621

    浏览量

    61644
  • 智能语音
    +关注

    关注

    10

    文章

    781

    浏览量

    48711

原文标题:她叫Siren,不是人,也可以是所有人

文章出处:【微信号:szwlw26059696,微信公众号:物联网之声】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    恒讯科技分析:SD-WAN组网技术对传统网络改变

    SD-WAN组网技术对传统网络带来改变主要体现在以下几个方面: 1、技术架构的变化:SD-WAN实现控制与转发的分离,通过网络虚拟化、IT化和软件化,有效解决网络资源的灵活配置问
    的头像 发表于 11-07 09:49 135次阅读

    有没有什么办法在不改变电源和功率的情况下来解决TPA311XD2失真的问题?

    换了大电源之后就没有失真,有没有什么办法在不改变电源和功率的情况下来解决芯片失真的问题,谢谢!!!
    发表于 10-25 08:34

    TLV3501做的50HZ工频信号的过零比较,带来相位的偏移什么办法可以解决吗?

    我现在用的TI的TLV3501做的50HZ工频信号的过零比较,在过零点多次触发的情况,我也尝试加滤波跟迟滞,都有效果,但是带来相位的偏移,我要求是相位的偏移量不能高于1US,请问各位
    发表于 09-19 07:37

    用了webench设计低通滤波器之后发现经过滤波之后出现相位的滞后,如何消除这个相位延迟呢?

    在用了webench设计低通滤波器之后发现经过滤波之后出现相位的滞后,请问一下该怎么做才能消除这个相位延迟呢,希望得到解答,谢谢!!!
    发表于 08-28 07:02

    使用VCA810做AGC电路时,输出随频率变化为什么?

    我在使用VCA810做AGC电路时遇到了一些问题,电路如图,问题主要是输出随频率变化,在同一频率下,改变输入赋值,输出赋值可以稳定,但改变频率的话,输出幅值就会改变,我测
    发表于 08-08 06:32

    esp32-lyrat接DuerOS对话功能之后,是否还可以进行录音?

    想问一下,esp32-lyrat 接入 DuerOS 对话功能之后,还是否可以进行录音? 也就是,想要问一下,加入DuerOS是否会将esp32-lyrat开发板的录音功能全程占用? 有无解决办法?
    发表于 06-28 16:30

    扎心灵魂小拷问:AI编写代码之后,软件工程师会被AI取代吗?

    软件开发者们很多让他们焦虑的事情。他们最担心的不再是如何用他们最喜欢的编程语言(C、C++、Erlang、Java等)表达最新的算法。相反,这种担忧正逐渐被人工智能(AI)所取代。 在这里,我们将探讨AI编写代码的过程,并回答这个问题:AI取代程序员吗?
    的头像 发表于 05-24 19:17 608次阅读
    扎心灵魂小拷问:<b class='flag-5'>有</b><b class='flag-5'>了</b>AI编写代码<b class='flag-5'>之后</b>,软件工程师会被AI取代吗?

    控件值改变触发事件问题

    项目中构建了一个串口收发器,只要发送数据值(信号量)改变时,触发串口发送数据事件,随着数据的发出,也会有数据接收,接收数据的变化,又会触发一个接收事件,在事件中会对接受数据进行处理。现在
    发表于 05-21 12:26

    stm32的中断优先级分组之后还能改分组吗?

    如标题所示,stm32的中断优先级分组之后还能改分组吗? 比如我要使用外部中断EXIT2,3,我在配置的时候配置优先级分组2组,然后配置EXIT2,3,如果我下面又想开外部中断
    发表于 05-13 08:40

    Stm32H7 spi带来更大的adc噪声,导致小信号异常值的原因?

    [Stm32H7]spi带来更大的adc噪声,导致小信号异常值
    发表于 03-25 06:10

    改变异步电动机的转速几种方法

    改变异步电动机的转速几种方法  改变异步电动机的转速可以通过以下几种方法实现:调节输入电压、改变动态电阻、更换极数、调整定子电阻、调整转子电阻和
    的头像 发表于 02-20 11:43 1413次阅读

    改变pwm占空比哪几种方法

    在一些PWM控制器中,可以使用比较器来比较输入信号和计数器的值。通过改变比较器的阈值,可以改变触发脉冲的时间点,进而改变PWM信号的占空比。
    的头像 发表于 01-17 14:54 6451次阅读
    <b class='flag-5'>改变</b>pwm占空比<b class='flag-5'>有</b>哪几种方法

    dataflash中的静态变量值初始化变吗,怎么改变变量的值?

    dataflash中的静态变量值初始化变吗,怎么改变变量的值? 若系统启动初始化时,不改变变量的值该怎么设变量?
    发表于 01-15 06:27

    AD6655上电之后,直接测量DCOA的输出是75MHz改变分频比之后DCOA输出还是75MHz,是什么原因啊?

    上电之后,直接测量DCOA的输出是75MHz,改变分频比之后,DCOA输出还是75MHz,这是什么原因 啊? 可以确定的: 1、评估板没有问题,刚刚拿到手的 2、时钟配置是选择的板上晶振(Y1
    发表于 12-21 06:08

    造成绝缘损坏的原因哪些?绝缘失效导致什么情况?

    造成绝缘损坏的原因哪些?绝缘失效导致什么情况? 绝缘损坏的原因非常多样化,主要包括以下几个方面: 1. 机械损坏:机械受力或振动可能导致绝缘材料的破裂、切割或剥离。这类机械损坏可能是由于材料
    的头像 发表于 12-19 15:05 4446次阅读