雷锦来自奥菲寺。
量子比特|微信官方账号QbitAI
谁能想到“偷镜”会发生在虚拟人身上.
在过去的五四特别节目中,这样的一幕真的在地面上演过:
不难看出,他们不仅仅是舞台上的配角,而是和李艺彤、赵佳韵等明星一起,演绎青春,释放活力。
而舞台的镜头也会时不时的给他们一个特写:
我不得不感叹.这年头,连虚拟人都有实力跟真人“抢镜”了。
这些虚拟人到底是什么?眼尖的朋友可能发现了,都是腾讯的。是的,它们是:
星瞳,来自QQ炫舞Gilly,来自和平精英童,由XNOX工作室和腾讯NExT Studios工作室联合打造的原创虚拟IP,但比起在舞台上与明星同台载歌载舞,更让人惊艳的是他们下一波操作3354闪现!
前一秒还在演播厅,下一秒就直接“闪”到了中国人民大学、北航、武汉大学,和学生在操场上表演各种舞蹈。
足迹可以称得上横跨大江南北。
不仅如此,腾讯还为节目准备了分会场——TMELAND。
在这个占地13万平方米的虚拟空间里,年轻人可以通过avavtar观看TMELAND广场的节目直播,还可以和许多TMELAND的岛民一起欢呼、跳舞、打卡。
这一幕,青春洋溢,热闹非凡。
不过相比于TMELAND,我们想在本期节目中探讨一下在虚构和事实中来去自如的三个虚拟人的实力。
台上一分钟,台下十年功,和人类一样。虚拟人要在大型活动上表演节目,也需要“台上一分钟,台下十年功”。
就像现实中的人际关系一样,大众对虚拟人的接受程度往往取决于“第一印象”。人物能否通过高质量的拟人化给用户带来足够自然逼真的亲切感、关怀感和沉浸感,往往决定了虚拟人的受欢迎程度。
但是,画鬼比人容易。人类的视觉感官对相似的图像特别是相似的人脸高度敏感,看起来像非图像的虚拟人很容易陷入“恐怖谷”效应。
即使打破了静态虚拟现实的瓶颈,如何让虚拟人自然移动仍然是一个大问题。人类可以从对方的表情和肢体中读出丰富的非语言信息,反过来,虚拟人的表情和动作中的轻微不自然也很容易被察觉。
然而游戏技术的革新也在推动虚拟人制作技术的不断进步。现在的虚幻引擎、创世等游戏引擎,基本上已经让虚拟人实现了从“非常相似到非常真实”的飞跃。
本程序中的虚拟人形和灯光是基于Unreal Engine引擎开发的。在制作过程中,为了让角色拥有更加细腻丰富的表情,腾讯NExT Studios团队使用自主研发的xFaceBuilder数字角色制作流水线,混合骨架和Blendshape方案,为童打造了700多个面部表情,实现了超精细制作。
同时,制作团队还抽象出了Maya的动画绑定系统,无缝运行在虚幻引擎上,实现了Maya和虚幻引擎的统一,在实时面部动作捕捉中获得了更好的面部动画。
不仅如此,为了让人物更加真实,制作团队在基于游戏引擎的头发建模技术中采用了LookDev流程。首先,理发师做了一个真实的发型,送到摄影造型实验室扫描头发的3D模型,然后用顶级游戏公司的解决方案定制发质;衣服的细节由专业的服装设计师设计,由服装设计软件制作,基于HumanIK的骨架绑定加形状BlendShape修改方案,最终使其呈现出更真实的细节。
在解决了图像问题后,制作团队选择了自主研发的xMoCap动画制作流水线,解决了虚拟人动作的流畅性和灵活性问题。
该管道集成了角色绑定、动作捕捉、动画工具、资产管理和动作捕捉数据库,可以很好地支持大规模团队协作、云端海量资产管理、高保真3D角色动画制作等。满足超现实数码人的制作需求。
一段QQ炫舞星瞳舞,可以看到在这个管道下,虚拟人动作的自然度:
同样,《和平精英》数字代言人“吉利”在舞台上的肢体表现也非常流畅。
目前,腾讯在虚拟生命制作的全过程中积累了大量的自主知识产权专利,大大降低了成本,提高了虚拟生命制作的效率。
据了解,这个五四特别节目只给制作组一个月的时间。正是因为有了丰富的虚拟人技术的积累,这些内容才能按时保质的生产出来。
通过“好、快、省”的虚拟人制作的出现,从支撑其发展的底层技术来看,最先开始让虚拟人走向常态化、规模化应用的是游戏行业。游戏行业在长期发展过程中一直在探索的一个命题是,如何让NPC的表情、动作、神态更像真人。
所以虚拟人技术快速发展的背后,离不开游戏领域多年积累的角色建模、动作捕捉、实时渲染、实时交互等技术。这些技术汇聚成一条生产流水线,使得虚拟人技术逐渐成熟,逐渐进入大众视野。虚拟人能实现“从很像到很真实”,本质上是游戏技术外溢的结果。
现在一说游戏技术,格局就要打开了。然而,游戏技术溢出的结果并不仅限于虚拟人行业。作为文化产业的重要组成部分,游戏的技术创新也在推动着文化产业的不断演进。
以众所周知的中轴线为例。中轴线有着7.8公里的巨大面积,有着700多年的历史沉积和几千年的文化底蕴。让大众快速全面地了解和认识中轴线背后独特的文明和传统,并不是一件容易的事情。在这方面,互联网和游戏技术的快速发展提供了一个全新的解决方案。
2021年12月,腾讯与北京市文物局共同启动了“数字轴心”项目。其中,最重要的一项措施就是腾讯开放其多年积累的游戏技术,包括游戏引擎技术、物理仿真技术、云游戏技术,直接助力北京中轴线数字展示系统的建设,让更多普通人通过全新视角体验北京中轴线的恢弘与活力。
除了文化产业,游戏技术也在影响着前沿科技的发展。
以掀起深度学习热潮的AlphaGo为例。正是在象棋的游戏场景中,完成了打败人类的壮举。
回顾AI的发展历史,可以说从诞生开始,背后就一直有游戏的影子。电子游戏一直是AI发展的重要驱动力,也是体现AI实力的重要场景。
1944年,在《博弈论与经济行为》一书中,冯诺依曼首次提出了两个人玩游戏的极大极小算法;
1947年,图灵编写了第一个下棋程序;
1950年,香农发表了《计算机下棋程序》一文,开启了计算机象棋的理论研究。
1951年,图灵的好友克里斯托弗斯特雷奇(Christopher Strachey)编写了世界上第一个可视化游戏跳棋。
……
时至今日,从OpenAI Five到AlphaStar,这些AI在某一场比赛中击败职业人类选手,依然是决策智能飞速发展的标志。
但游戏技术的影响力远不止于此,其价值的创造力早已延伸至实体产业。
腾讯依靠数字结对帮助自动驾驶技术落地就是一个很好的例子。
在自动驾驶的产业化发展过程中,真实道路环境测试是非常重要的一个环节。业界一直有个共识,量产应用必须跑“110亿英里”,相当于地球和太阳之间往返4.9次。
显然,这样的目标是不可能实现的
针对自动驾驶模拟测试的需求和行业痛点,腾讯推出了内置高精地图、虚实结合、线上线下融合的自动驾驶模拟平台TAD Sim。
TAD Sim作为业内首个由游戏技术和真实数据驱动的虚拟仿真平台,在真实性、全面性、可视化、轻量化、标准化等方面处于行业领先地位,可以很好地满足虚拟世界中自动驾驶的测试和学习需求,并大幅降低相关成本。
而自动驾驶只是游戏技术对实体行业“溢出”的一个缩影。
毫不夸张地说,游戏技术已经广泛应用于基础设施、智慧城市、治理规划等领域。
例如,51WORLD利用来自游戏引擎的数字结对技术,动态生成并同步妈湾港10万多个集装箱,首次实现数字结对全要素场景下港口行业动态数据的实时驱动,以及5G环境下港口总工业设备的态势感知。
例如,北京数字郑桐基于游戏引擎打造的“SPAR”双生平台和新城市大脑产品,将数字郑桐的业务能力融入了城市运营的“一网统一管理”中,并将双生能力与实际业务需求深度结合,通过1:1还原的数字双生场景,以虚实结合、天地一体、预测分析的方式,有效提升城市精细化、智能化管理能力。
从更高的层面来看,现在的游戏早已超越了最初的“局限”,成为文化与科技的共生,将在数实融合领域展现更加多元的价值。
在过去的几十年里,软件和硬件相互交织、相互碰撞,推动了游戏内容、体验和技术能力的不断创新。如今,游戏技术已经发展成为一个涉及计算机图形学、运动学和动力学、多功能感知、人工智能和虚拟现实的前沿交叉领域。
从文化的角度来看,游戏不仅是文化的重要载体,也是文化创造的工厂之一。从科技的角度来看,游戏对前沿科技起到了“试验田”和“推进器”的作用。其本质从早期的“娱乐产业”演变为文化产业与科技产业的“交织体”,成为当下的文化科技成果之一。
不久前,腾讯董事会主席兼首席执行官马在《关于加强文化科技成果深度应用与自主创新的建议》中指出,文化与科技的融合是文化强国和科技强国两大战略的交叉领域。
文化科技成果不仅广泛应用于文化产业,也在文化产业之外的应用中不断丰富。溢出效应开始显现,为科技创新带来新方向,促进数字经济和实体经济融合发展。
游戏作为文化与科技的共生体,正在开启这个世界的无限可能。
—结束—
量子qbitai头条号签约
关注我们,第一时间获悉前沿科技动态。