腾讯AI Lab发布「电竞虚拟人」,视频版本一次看!



本文将介绍 AI Lab 基于前沿多模态研究开发的首个“电竞虚拟人”——“天鹅静”(T.E.G)。


去年,腾讯电竞第一次提出“电竞运动城市发展计划”。


今年,海南宣布成为该计划落地的首个省份!在前天举办的“2019全球电竞运动领袖峰会暨腾讯电竞年度发布会”上,腾讯电竞宣布几大重磅活动将落地海南,还要开课、写教材、发奖学金到升级N个赛事……


腾讯 AI Lab 则在大会上正式发布了首个“电竞虚拟人”,基于前沿多模态研究,未来将具备个性、成长性、主动性甚至创造性,期待AI+电竞能迸发出极“智”想象力。

视频也就看了几十遍吧……


这位虚拟人代号“T.E.G”,被科学家们亲切称为“天鹅静”。她有智慧的大脑,能聪明伶俐解说一场王者荣耀的游戏比赛,局势分析表现可圈可点;她有自然带着感情的声音,配合上生动有活力的唇形和表情。她的角色,将不止于主持、主播、虚拟偶像……


对普通人,电竞虚拟人能教你如何应战,磨练电竞技巧;对赛事观众,电竞虚拟人虚拟人能提供个性化解说,定制解说,陪你看比赛,为你解读情境;对职业选手,电竞虚拟人虚拟人能成为教练、数据分析师、闲聊好朋友,通过专业分析让选手能走得更远;期待虚拟人能从电竞进入更多行业,创造无限可能。


征集“首席看客”

你喜欢我们的“天鹅静”吗?


请留言说出你的评价、创意或问题,我们将选出 3位 有价值的留言,送出 定制版企鹅公仔


俞栋:AI+电竞的极「智」思考

腾讯AI Lab副主任及西雅图实验室负责人,语音识别及深度学习领域专家俞栋博士,介绍了“T.E.G”的研发初衷及对AI+电竞结合的全新思考,以下为演讲视频与全文,Enjoy。


演讲视频:


演讲全文:


大家好,我是腾讯AI Lab的俞栋。去年中国健儿在亚运会上精彩的电竞比赛,让我深深地感受到电子竞技的魅力。最近,我也关注到两则电竞的大新闻:一个是,权威机构预测,2019年中国的电竞用户将达到3.5亿,用户对个性化体验提出了更高的要求。而同时,电竞已经成为一种职业,但电竞行业也面临人才紧缺的问题。面对用户的多样化需求和行业的人才紧缺,做人工智能研究的我不禁要问:AI能为电竞行业做些什么?


电竞是非常新兴的产业,AI也是在最近几年才广为人知。我们不妨想象一下,在未来,如果能用AI技术来构建“电竞虚拟人”,使之成为电竞大军的一员并服务不同的用户,该是多么有意思的一件事!要达到这样的目标,我们需要赋予电竞虚拟人许多能力,其中策略协作能力和感知互动能力尤为重要。


电竞是比赛双方关于策略、战术的博弈,因此用AI技术赋予电竞虚拟人策略协作能力至关重要。事实上,竞技类游戏从50年代开始,就是人工智能发展的重要试验场。早期的AI研究一度是以信息充分、规则明确的棋类游戏为载体。在这些场景下,人工编码结合树搜索就能基本解决问题,里程碑事件是1997年IBM深蓝战胜国际象棋冠军卡斯帕罗夫。最近,随着深度学习方法再度复兴,AI在更为复杂的竞技环境中接连击败人类职业选手,比如DeepMind的阿法狗2016年以 4: 1击败頂尖职业围棋手李世石,2017年又战胜世界第一棋手柯洁。腾讯的策略协作AI“绝悟”则突破了团队策略配合、空间状态理解、操作反应速度、和不确定性应对等不同纬度的能力,以强大的竞技实力,在电竞赛场上占据一席之地。


但是,电竞行业的范畴远远超过了竞技本身。要使电竞虚拟人在更广阔的电竞行业里给大家带来更好的体验,还需要用AI技术升级她的感知互动能力。比如,电竞主播和解说兼具娱乐和教育的意义,是电竞虚拟人可以提供价值的地方,但是,在这些场景下,AI要给出的不只是最优的动作序列和按键操作,而是要在一个开放的环境下,结合知识、经验、重要度、精彩度、连贯度等纬度对诸多事件进行优先级排序,给出电竞局势的分析和有风格的语言、声音、和形象和谐一致的多模态表达。这些看似简单的表现对AI技术是巨大的挑战,我们需要解决样本较少,评价主观,知识依赖等问题,要使“电竞虚拟人”能从新闻报道和人类解说中不断地学习局势分析和解说的能力,并将这些能力举一反三;为了使“虚拟人”更自然、生动、可控、并饱含情绪,我们研发了Durian模型来合成语音并同步预测唇形和表情参数,这些唇形和表情参数通过虚拟形象驱动算法让“电竞虚拟人”有拟人化的表情和肢体动作。这样,“电竞虚拟人”就可以摆脱对动捕演员和声优的依赖,解说任意的比赛,并和千千万万“人类”产生互动。


今天,我们就带来了这样一个孵化中的“电竞虚拟人”,我们要展示的任务是“解说”。


这是“电竞虚拟人”的V0.1版本,也是AI LAB 虚拟人研究的第一次尝试。我们非常感谢王者项目和赛事团队、七煌教育、腾讯电竞对我们研究的支持。这样一个将来会具备个性化、成长性、主动性、甚至创造性的“电竞虚拟人”,未来的想象空间非常巨大:对于普通用户,“电竞虚拟人”可以陪你对战、帮助磨练电竞技术;对于赛事观众,“电竞虚拟人”可以提供个性化解说,你可以让自己定制的小姐姐、小哥哥陪你一起观看并解说比赛;对于职业选手,“电竞虚拟人”可以成为行业里的电竞教练和数据分析员,通过对选手的专业分析,帮助他们在比赛中走的更远;不过,更可期待的是“电竞虚拟人”在未来会突破电竞走向各行各业,创造无限的可能。


愿在场的每一位电竞人都能和我们一起畅想和探索AI+电竞的未来。