让“无声世界”感受赛场魅力!带你看看冬奥手语数字人有哪些奥秘******
2022年2月4日,第24届冬季奥林匹克运动会在北京举行,让世界目光再次聚焦中国。本届北京冬奥会秉持绿色、共享、开放、廉洁的办赛理念,凝聚中国科技力量,面向世界、面向未来,向全球奉献了一场精彩、非凡、卓越的奥运盛会。
本届冬奥会运用最新科技手段,为全世界观众提供了惊艳的现场转播和全方位覆盖报道,北京冬奥会也成一场上科技含量高的奥运会。赛事活动期间,为了让各类人群都能平等地享受本届冬奥盛会,北京电视台上线了智能手语播报数字人,在《北京新闻》和《北京您早》等节目中进行冬奥专题手语播报,为听障人士带来精彩赛事报道。
最新数据显示,我国听障人群超过2700万,这部分人群与健听人一样,他们对教育、社交、娱乐等信息获取都有巨大的需求。但长期以来,传统人工手语翻译工作量大,且主持人和手语主持人配合难度极高。手语动作表情复杂,语序与正常语序差异大,正常情况下想要熟练掌握手语大约需要2年左右的时间,还要结合语境进行猜测。
受北京市科委科技冬奥专班委托,北京电视台联合凌云光、智谱AI等业内科技公司,在北京市残疾人联合会和市残联聋人协会等支持下,用3个多月时间,让手语播报数字人完成了近10万条手语语料学习,且翻译准确率高达90%。
在如此短的时间内实现这项高难度动作,智能手语数字人是如何做到,在这背后又有哪些技术创新难点?
在多位业内人士看来,近年来人工智能体系建设重点布局在算法层和应用层,数据层建设远远不足,并且针对数字人相关产业,底层数据库的数量、质量和开源程度还明显不足。尤其是国内现有的手语语料数据库数量少,且多以图像、视频等二维平面为主,无法满足AI(人工智能)训练的需求。
同时,因手语语序与中文语序差异大,方言分化更加复杂,且需要通过表情、口型、动作等方式来传达信息。除了传统的二维平面图像、视频采集,三维肢体运动、表情信息数据采集及结构化参数表达外,手语语料数据库建设对三维运动信息捕捉也十分重要。
凌云光手语数字人产品相关负责人介绍,在建设高质量手语语料库的同时,他们充分调研了2022北京冬奥专用手语术语,并联合北京市残联、聋人协会等相关组织机构,进行数据标注,建设手语语义映射关系,不仅完善了国内手语数据库的建设,也为手语推广和AI研究留下了宝贵的数据资产。
该负责人举例说,基于“悟道2.0”超大规模人工智能模型的技术支撑,手语数字脑用计算机模仿听障人士的大脑,将看到的中文文本信息转换成手语词汇序列,包括中文语义蒸馏模型和AI手语分词快编算法的研究。中文语义蒸馏模型用于从输入的文稿或文本中提取出关键的语义信息,将中文文本语义提炼和精简,形成精准匹配适合手语表达的文本;AI手语分词快编算法则用于将蒸馏得到的中文文本,根据冬奥手语语料库划分成相应的手语词汇序列,供数字人做表达输入。
该负责人还提到,数字人是冬奥手语播报的载体和展现形式,通过高精度写实数字人全流程制作方案,可实现一键数字建模,高度还原真人发肤,重新毛孔等细节,更加真实亲切。同时,通过跨模态拟人生成算法,还可以将手语词汇序列,生成相应的动作信息,驱动数字人模型做出相应的动作、手势和表情。(姚坤森)
军旅剧创作新收获******
一部军旅剧如何做到叙事和视觉同样精彩,多视角多维度还原军旅生活,对主创是个不小的挑战
《勇敢的翅膀》是一部以航空兵部队为题材的电视剧。在以写实手法再现航空兵生活的典型环境时,作品对“军魂”进行开掘、诠释,紧紧围绕飞行员的成长,展现了当代青年军人淬火成钢的历程。
《勇敢的翅膀》在题材选择、人物设定、故事讲述、画面呈现等方面都令人耳目一新,可以说是军旅剧创作的新收获。
军事题材影视要着力表现英武和阳刚之美。这也是军旅剧创作的优势。《勇敢的翅膀》刻画了一组航空兵形象。在丰雷机组中,老机长丰雷、改型机长秦朗以及其他几位分司领航、通信、武控等战斗任务的战斗员,都热爱空军、热爱飞行,将军人的使命和担当看得很重。
丰雷和秦朗这一对“严师父”和“犟徒弟”,看似相逆而行,实则相向而行,这一矛盾主线的设定,是剧集的一个突出亮点。丰雷飞行技术过硬,荣获过两次“金飞镖”奖,心理素质强大,善于指挥、敢于管理。为了建设强大的航空兵队伍,他甘愿由副团长改任教员,将所有精力放在培养年轻一代飞行员身上。秦朗不是一夜之间由落后兵成长为英雄的。论对空军的热爱,论飞行知识和技术,秦朗各方面都是个“优等生”。但他有些自傲,优秀飞行员应有的心理素质不够。丰雷看在眼里,决心将秦朗从璞石雕琢成玉。
丰雷对秦朗爱之深、责之切。剧集以层层剥笋般的叙事,清晰呈现了丰雷帮助秦朗“过三道坎”。其一,在一次飞行训练中,心高气盛的秦朗其他飞行动作都做得很好,却犯下了起落架没有放实的低级错误,被取消改机型的培训,分流到“功勋团”——一个老机型团。失去了参加飞机改装的机会,秦朗一度消沉。此时,为他承担责任的副团长丰雷也到功勋团当了教员。丰雷带秦朗完成几次飞行,使秦朗过了不愿到“功勋团”的关。其二,秦朗在一次飞行突发事件中不能冷静处理,丰雷找航医询问怎样帮助秦朗克服心理障碍,以避免被停飞。其三,在秦朗救了空军老前辈,却被误判为撞人,被停飞时又是丰雷基于对秦朗的信任,和上级机关协同调查,为秦朗正了名。秦朗在师父严与爱的训练下成长。合作反恐的实战中,飞机被敌人导弹击中时,秦朗能冷静处理、安全迫降,丰雷机组立功。
作为一部青春热血的军旅剧,该剧融合呈现了励志、成长、偶像等元素。秦朗一代青年飞行员的成长历程,被正确诠释为由个人技术、个人素质向集体英雄主义的升华。丰雷在训练中,不仅向机组年轻飞行员传授技术和经验,更教育他们协同配合,追求一种集体才能形成的战斗力。剧中最后一次飞行,秦朗向在身旁的师父求问数据,丰雷答:“现在你是机长,你是机组的灵魂,你下命令。”丰雷经常对机组飞行员说的一句话堪称金句:“记住,一旦做了飞行员,你就有了两条命,一条是自己的生命,一条就是使命。国家的使命,人民的使命。”剧集主题在这里得到了升华。
《勇敢的翅膀》塑造热血军人形象时十分注重全视角、立体化叙写。他们每一次飞行都牵动着亲人的心。丰雷结婚十二年,在机场的时间多于陪伴妻子儿子;吴汉和妻子结婚后一直没有时间举办婚礼,新婚妻子王晓琳来队探望,小两口还没来得及说句体贴话,机场就来电话让吴汉回去开会;耿建设和追求他的女同学彭馨正要去散步,一看回营的时间已到,只好匆匆告别。机场上一旦响起警笛声,家属们最敏感、最揪心。剧中饱满的师徒情、战友情、亲人情,打动了观众。
剧集将航空兵部队敢于空中拼刺刀的精神融入与众不同的军营生活。画面上,或旭日初升,或晚霞满天,或夜色深沉,战机隆隆掠过,十分壮观。机舱内的实景拍得一丝不苟,战斗员的口令、操作准确到位。每次飞行后的讲评、复盘,提供的军事术语达到了教科书般准确。实景拍摄的飞行员一日活动,充分展示出军令条令之严,军容军姿之美。一部军旅剧如何做到叙事和视觉同样精彩,多视角多维度还原军旅生活,对主创是个不小的挑战。《勇敢的翅膀》跨越了这道门槛。
(作者范咏戈为《文艺报》原总编辑)