科大讯飞虚拟技术再突破:让A.I.虚拟人帮你更有爱拜年

当科技遇上新年,会有怎样的火花?

近日,科大讯飞最新上线了A.I.虚拟人爱加帮你送新春祝福的H5《你用A.I.拜年了吗?》,把最暖心的新春祝福通过爱加声情并茂地送到家人朋友眼前,让你今年的拜年更酷炫。和以往的虚拟人不一样的是,爱加的形象更加活泼可爱,行动也更灵活,还熟悉更多种语言和方言,能给天南海北的朋友传达更亲切的拜年祝福。(在微信公众号“科大讯飞”后台回复“爱加”即刻体验,还有机会获得千元惊喜A.I.礼物)

百节年为首,回家过年是每个在外打拼的人一年中最大的期盼。然而,今年情况特殊,很多地方都倡议“原地过年”。通过爱加传达你的新春祝福,让今年的“屏”上拜年将更具科技感和真实感。

科大讯飞虚拟技术再突破:让A.I.虚拟人帮你更有爱拜年

个性化科技拜年,这个虚拟人更逼真

集成语音合成、语义理解、机器翻译、人脸建模、口唇预测、图像生成等多项人工智能技术不断发展,使得A.I.虚拟人能根据文本语义做出相对应的面部表情及肢体动作,并逐渐走入寻常生活中。对于虚拟人,很多人并不陌生,2001年,英国 PA New Media公司推出了世界上第一个虚拟主持人“阿娜诺娃”,三年后央视推出了国内首位虚拟电视节目主持人“小龙”,都是虚拟人的应用案例。

相比于爱加来说,此前科大讯飞推出的A.I.虚拟主播小晴表情动作相对比较单一,使用场景很受限制。而当前推出的虚拟人爱加在风格上更多样,在声音、肢体动作乃至于微表情的表达上更丰富,使用虚拟人爱加来帮你送上拜年祝福视频,让接收者更能真切感受到浓浓的新春祝福。另外,特别关注到的一点,这次的爱加拜年活动视频,除了爱加本身形象更多样表达更灵动,还创新性的引入了语义理解技术根据文本实现背景、音效等更多丰富视频元素的自动搭配,引领了AI驱动多模态视频合成方向,这一突破,也意味着A.I.虚拟人技术有望实现更加多元的拓展应用,各行业大范围应用虚拟形象交互的时代,或许不远将至。

攻克合成技术壁垒,拜年虚拟人体现“人性化”

人工智能不断进步,A.I.早已不再是冷冰冰的科技,而是演变成为能帮助人类享受智慧生活、守护情感世界的好帮手。虚拟人的应用前景可期,但由于技术限制,其肢体动作、语言、情感表达效果还不能满足人们期待。

那么科大讯飞是如何攻克合成难点,让其A.I.虚拟人有更高的触达率?

首先,拓展A.I.虚拟人的“本事”,让其“能说会道”“能歌善舞”。在科大讯飞A.I.虚拟人已有的多语种、多方言合成能力之外,科大讯飞提出了基于歌唱音准的无监督歌唱标注方法,将发音和音准分离,利用神经网络分层级预测,结合高精度神经网络声码器合成高品质歌曲,同时提出姿态自适应的表情合成技术,解决了舞动状态面部姿态大角度以及多角度快速切换场景下的唇形合成难题,在使得虚拟人在精通各种语言的同时,还能倾情演唱。

其次,增强虚拟人的“人性化”。为了给虚拟人注入情感,使其在互动表达中更有人情味,科大讯飞结合认知心理学理论对虚拟人进行交互情感设计,利用无监督表征学习方法,分离并获取语音中的情感表征。同时,利用海量文本无监督语义模型对各类文本进行情感分类预测,实现人性化的端到端情感合成系统,让虚拟人“活泼”起来。

最后,提升虚拟人的“表现力”。为使拜年视频更具个性化,科大讯飞提出结合场景的背景音乐、音效叠加方案。通过对常用场景分类分析,构建丰富多元的背景音乐、音效资源库,结合具体应用场景,进行背景音乐、音效的预测、叠加,从而实现高表现力的虚拟形象合成,用户能定制理想状态中的拜年场景,让A.I.拜年场景更加生动多元。

值得一提的是,基于科大讯飞提出的海量说话人的音视频数据预训练技术,虚拟人爱加能够做到基于少量数据就完成快速的建模,满足多种场景多种风格形象的快速定制,同时,当前虚拟人实时合成的速度以及并发一直是业界的痛点,科大讯飞本次的虚拟人拜年活动支持了高并发在线高质量视频生成,从而大幅提升虚拟人视频制作的效率。用户只需要等待几秒钟就可以完成一个A.I.虚拟人合成视频,有效突破了A.I.虚拟人因为并发路数有限而不能大规模推广的难题,同时也展现出A.I.虚拟人从toB向toC推广应用的可能。

可以预见,虚拟人爱加只是一个科大讯飞在虚拟人技术突破的一个新起点,它的出现为下一步A.I.虚拟人的大范围、规模化应用奠定了坚实基础。

接棒人机交互领域,虚拟交互已大势所驱

5G时代的到来,让科大讯飞人工智能科技与各行业有了更深的融合。通过人机协作,把人从重复性工作中解放出来,更好地解放社会生产力,虚拟人技术如今正在匹配不同行业的更多场景需求,助推各行业“服务力”提升。

目前,科大讯飞基于A.I.交互能力的虚拟形象解决方案已经应用于多个场景,如虚拟站务员、虚拟金融理财顾问、虚拟面试官,科大讯飞虚拟人的多模态得到了广泛应用。在教育场景中,科大讯飞一对一的A.I.虚拟老师”面对面“现场教学,大大提高了教学效率、丰富了教学的内容形式。

在视频内容生产上,通过A.I.虚拟主播系统提供的一站式视频智能生产服务,目前已累计为150多家媒体提供高效率、低成本的新闻内容生产,保障了传统媒体往移动化、快速化新媒体阵营的内容迁移,为未来视频的生产提供更快捷的方式。

随着A.I.虚拟人爱加的应用,科大讯飞也将进一步推动技术的发展,拓展更多领域的虚拟人落地应用。在智能交互领域,科大讯飞将不断拓展,并将更多视频融合元素、虚拟人情感、丰富虚拟人技能、场景化主题、情感化决策融入虚拟人设计中,让其有望变换成A.I.客服、A.I.经理、A.I.店长、A.I.演示员等多种社会角色,陆续在不同行业、不同领域上岗,并有望接棒下一个时代的人机交互领域。

科技时代,以人工智能为驱动的虚拟人的技能越来越丰富,能够适用的场景也将越来越多元,或许某天,虚拟人会是我们的理财顾问、健康管理师......未来,科大讯飞将持续坚持“顶天立地”战略,用人工智能建设美好世界。

(免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。
任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。 )