banner
+手机订阅

探索虚拟作品的现实可能,解读科幻题材的科学原理。只有认真研究才能理解乐趣,越是喜欢就越要寻根究底,走进游戏科学,了解更多游戏和科学关联的话题。

游戏科学

Game Science

从虚拟偶像到虚拟主播:11区黑科技歪向何方?

从虚拟偶像初音到虚拟主播小爱,日本人对虚拟萌娘的爱实在令人叹为观止。但是虚拟偶像究竟是不是高科技的产物?她们受欢迎背后的动因是什么呢?

爱玩网 百万稿费活动投稿,作者 猫斯图,未经授权请勿转载

从虚拟偶像到虚拟主播:11区黑科技歪向何方?

从去年11月开始,一个被玩家爱称为“人工智障爱酱”的虚拟主播在Youtube上开始流传开来。这个名叫“Kizuna AI”的3D萌妹是个神经粗线条,偶尔又有些腹黑的人物。在视频镜头里,她时而恶意卖萌地说一些不着边际的话,时而颜艺丰富地自我吐槽,一下子就吸引了众多宅男的目光。

把片假名翻译成汉字,Kizuna的名字叫做“绊爱”,叫她作小爱似乎是为了暗合AI这个新的技术潮流。小爱自己也经常在影片中对自己“人工智能”的身份有十足的认知。而她背后的运营团队甚至还组织过一次人工智能之间的对话,让小爱和苹果旗下的Siri对话。结果似乎是小爱完胜,把只会死板应答的Siri打得体无完肤。

1
和SIRI的会话,大家可以去youtube或B站观看

小爱超人一等的表现让粉丝们不禁猜测,这个虚拟人物背后的支持引擎究竟是怎样强势的人工智能?有人甚至猜测,她背后的支持软件是日本文部科学省秘密研制的强人工智能,用虚拟偶像的面目出现在大众面前只是为了伪装和调试她的性能。这个推测显然是受到了去年10月份日本人工智能演员Rinna的启发。日本微软出品的这一款女演员机器人就是为了提高人工智能在各种情况下的表现能力。毕竟体验各种人生的最佳职业,莫过于演员了。

7268f36e772c27a9047f7a59e4e0ab71604888d6_hq
爱酱表情丰富,AI界新一代颜艺帝,看似心机了得实则傻了吧唧

从虚拟偶像到虚拟主播:11区黑科技歪向何方?

从虚拟偶像到虚拟主播:11区黑科技歪向何方?

从虚拟偶像到虚拟主播:11区黑科技歪向何方?

从虚拟偶像到虚拟主播:11区黑科技歪向何方?

从虚拟偶像到虚拟主播:11区黑科技歪向何方?

从虚拟偶像到虚拟主播:11区黑科技歪向何方?

从虚拟偶像到虚拟主播:11区黑科技歪向何方?

但熟悉现在人工智能技术发展潮流的人都会意识到,说小爱这个虚拟偶像是强人工智能显然还并不合适。以现在的技术进展来看,要像她这样能够对游戏画面也做出实时的正确反馈几乎是不可能的。用人工合成的说话声音,也没有办法达到像她一般流畅自然的水平。你只消看看V家的姑娘小伙们合成出来的唱歌声音是多不自然就会对这个判断持支持的态度。

与其说是人工智能做出的实时反馈,倒不如说小爱其实背后有一个真实的演员在借助她的面具做表演。在涉及运动娇喘的视频节目里,小爱的声音经常会出现破麦就是一个最有力的例证,显然是一位敬业的声优在扮演这个角色。没错,把一个真人通过动态捕捉技术、人脸识别和人物建模技术结合起来,变成一个可爱的虚拟人物,在今天的技术条件下并不是什么天方夜谭。

2
你说什么?

首先是动作捕捉技术。这种技术最早被用于上个世纪的物理研究,专门用来分析物体的移动特性。后来,检测人体关节移动的设备被应用到了体育训练当中。随着体育界大量应用动作捕捉技术,影视动画和游戏行业也加入了这个行列。在探访大片制作现场的时候,如果你看到有人穿着一件镶嵌着无数白点的黑衣服在做奇怪的动作,就一定是在给动态捕捉拍摄底板。通过把人体关节动作在计算机中重新解析和配上肌肉,动画人物就能做出和演员一模一样的动作了。

3
小姐姐身材真好~

尽管动态捕捉技术相当省事,但它也有自己的破绽。最经常会出现的两个问题是翻关节和穿模。所谓翻关节就是在人物的运动中,关节处出现了有悖常理的翻着,比如俗语所说的“胳膊肘往外拐”。出现这种问题很有可能是计算机在识别关节位点时出现了误读,把不是关节的点认作关节了。而穿模问题的发生则和演员与动画人物的身材拉伸失调有关系。如果让一个瘦演员演胖人物,那动画胖子的手就会常年穿透自己的肚子出现在奇怪的地方。

小爱身上就经常发生这两个问题,关节反转不说,有时候还会在手放在胸口时穿透胸部,伸到里面去。观察仔细的绅士们据此推测,扮演小爱的女演员应该胸部没有小爱的人物模型大,真是典型的绅士视角。

C2rP4rBVQAEeSGN
可是,小爱哪里有胸啊?

其实这两个问题都是可以通过人工调试消除的,否则动态捕捉的真实性就没有价值了。可惜小爱在Youtube上的视频需要做到每日一更,主创人员对有的失误就只能听之任之了。

面部捕捉技术其实也并不令我们陌生。无论是习惯看国外直播平台还是国内直播平台的观众,都会在2015年开始发现有些房间的主播界面是一只可爱的动物。或猫或狗或浣熊的动物脑袋伴随着主播节奏在摇头晃脑、做出奇特的表情。完成这一创举的是一款叫做Facerig的应用,经常看游戏直播的读者想必都听说过这个名号。

从虚拟偶像到虚拟主播:11区黑科技歪向何方?

应用于电影制作的人脸识别技术并不是什么新鲜事物,早在《阿凡达》和《猩球崛起》的时代,好莱坞就已经拥有成熟的人脸识别套路了。人脸识别其实和动作捕捉在原理上没有太多的区别,只是人脸肌肉的移动精密度更高,更难以捕捉细节而已。

十年前的人脸识别仍然需要在演员脸上贴上反光纸或者点上荧光染料,无论如何总还是会有点影响表演。而且当时的人脸识别需要很复杂的标定流程,只要一台摄像机的位置稍有变化,整个现场就需要全部重新标定。

5
我觉得……我快要得密恐了

随着对人脸识别的算法进步,这个问题至少在短距离上已经解决了。软件通过摄像头捕捉到的面部表情被简化成80多个位点,在卡通人物的脸上移动相应的位点就能模拟出人做的表情。当然这样的模拟不可能做到十全十美,有时候多少还是会有点变形。但只要神似,人们在快乐之间也就不会去深究什么了。虚拟偶像小爱在打游戏受到惊吓、感到惊喜时的丰富表情经常有一定的时滞,几乎已经可以确定是类似技术的产物了。

人物建模就更不是什么难题,事实上这往往是现实人物构建虚拟人物的第一步。设计小爱原型的森仓円本就是设计少女形象的一把好手,负责3D模型监制的Tda更是亲自参加过初音未来的扩增模组制作。在这两位大神级人设专家的联手努力下,小爱让人觉得可爱本就是题中应有之义。有了这样的人物形象,即使小爱并非真正的人工智能而只是一个把配音演员二次元化的动画人物,又有什么关系呢?

6
来看看森仓円设计的其他少女

说到小爱的人物建模,我们不能不扯远一点,再看看日本的另一组重要的虚拟偶像:V家的人物们。实际上从小爱的运动模式来看,有人怀疑她的模组是直接从MikuMikuDance中拷贝过来的。

而借助这个软件成功成为世界上第一位全虚拟偶像的,便是所有宅男都喜爱的初音未来(我老婆,不要跟我抢)。到目前为止,初音未来作为一个虚拟人物的价值已经超过了10亿人民币,而且还在以惊人的速度每年增长着。在硬核二次元爱好者中,对V家旗下其他人物的消费也相当可观,这一系虚拟偶像的总价值不下15亿人民币。

7
V家早期的软件人物,也是最为人所熟知的几位

MikuMikuDance作为一个开源代码,早就成为世界各地宅舞爱好者制作音视频的主要工具了。2008年2月,MikuMikuDance软件上线,很快就获得了技术宅们的响应,一下子涌现出来大量借助和动态捕捉类似的关节点人工设计,制作者(也就是调教师)可以伴着音乐做出相当令人喷鼻血的悟道视频来。不管是在日本的Niconico还是在中国的AB站上,这种舞蹈视频都是围观者甚众的大门类。随之,开发商推出了和微软Kinect联合的新版本,直接通过制作者自己的动作设计Miku的舞蹈动作,降低了制作新视频的难度。伴随着V家主打推出的歌曲翻唱软件,初音文化遍地开花,成为了世界通晓的二次元代表性人物。

8
面对着虚拟人物山呼海啸地鼓掌,这是很多老一辈人无法理解的追星路

然而MikuMikuDance并非是当时刚刚开创的新技术,只是一种简化了的动作捕捉技术。开发者是把电影特效工作室那种复杂而全面的人物制作软件做成了非专业程序员也能上手的好用软件。举个不太恰当的例子,这正是动画制作界的美图秀秀。但美图秀秀在图片领域的成功正在告诉我们,恰恰是这些简化了的好用技术,才是普及技术的关键杠杆。初音的成功也深植于此。

让粉丝们三拜九叩的《Love Live》企划所塑造的虚拟偶像干脆全然和技术没有关系。站在虚拟偶像们背后的九位真人歌手仅仅依靠自己的形象和歌声恐怕永远无法收获这么多粉丝的喜爱。但是借助二次元世界的巨大能量,她们得到了诸多观众的热捧。比倾情献声的真人歌手更受欢迎的,则是九个活泼可爱的动画人物。虚拟偶像的潜力之大,在这里也能看个究竟。

9
LL大法好

小爱可能是集中成熟技术结合的产物,背后是专业演员的功底在支撑;初音的人物建模技术也并非黑科技,只是早就出现了的动作捕捉的逆向工程;LL企划更是胜在虚实结合的创意,而非多么高级的动画制作技术。虚拟偶像的成功,看来并不在于技术有多么出众,而在于人物形象的塑造是不是迎合着消费者的心态。

不管是虚拟的还是真人的,造星工厂让偶像和粉丝互动的一个主要目的,就是让粉丝有一种自己亲手塑造了偶像的成就感,增加偶像和粉丝的粘度。真人可以通过选举、买专辑、去演唱会这样传统的形式和粉丝构成连接。虚拟偶像就更容易互动了,干脆允许粉丝使用偶像的形象制作新的文艺作品。

按照里夫金名作《零边际成本社会》的观点,温饱解决之后的人们会越来越愿意把心思放在创作武昌的作品上。共享经济的价值将会很快和商品经济并驾齐驱。出于对虚拟偶像的喜爱,人们花费大量时间为他们制作同人、创作歌曲、设计情节,其用心程度甚至比正式工作更甚。

10
高仿的中国虚拟偶像什么时候才能更多地占据市场?

毫无疑问,这个潮流的开创者就是初音未来,她让全世界的爱好者打破一切疆界,用最亲密的方式与自己互动。在一次又一次的粉丝创作中,偶像们与粉丝的羁绊也变得深刻起来。

在合适的时代和场合出现也是虚拟偶像成功的秘密。在繁忙无聊的现代城市生活中,虚拟偶像是很多人难以割舍的逃避现实的工具。每个人多多少少都有自己的烦心事,唯有在声嘶力竭地支持自己的偶像时,这些讨厌的烦心事才会一下子烟消云散。通过虚拟偶像的桥梁,人们也可以在越来越孤单的城市生活里找到和自己志趣相投的伙伴,至少对很多二次元重度患者来说是这样的。技术只是帮助人们实现这个梦想的手段,只要偶像还存在,就一切安好。

从虚拟偶像到虚拟主播:11区黑科技歪向何方?

欢迎参加——爱玩网百万稿费征稿活动:当金牌作者,开网易专栏,领丰厚稿费,得专属周边!

我们在STEAM剁手为哪般?论游戏玩家的

游戏专栏投稿信箱:otaku@vip.163.com

欢迎关注爱玩APP【精选】板块,更多精彩等着你!

你可能感兴趣:
游戏科学 Kizuna AI 人工智障 爱酱 初音 猫斯图
48小时评论排行
  1. 炉石传说卡牌包迎新改动:不会获得重复传说卡 913
  2. Switch供不应求?任天堂:我们也万万没想到 605
  3. 天朝游戏:我们能看到世界,但世界看不懂我们 601
  4. 动视将发售《使命召唤4;现代战争重制版》单卖版 259
  5. 《GTA5》风波渐息?R星决定不再起诉非商业MOD 195
相关文章

作者猫斯图

单机游戏骨灰玩家,写作快枪手。

17600
用微信扫描二维码
分享至好友和朋友圈
x
用微信扫描二维码
分享至好友和朋友圈
x