让“无声世界”感受赛场魅力!带你看看冬奥手语数字人有哪些奥秘******
2022年2月4日,第24届冬季奥林匹克运动会在北京举行,让世界目光再次聚焦中国。本届北京冬奥会秉持绿色、共享、开放、廉洁的办赛理念,凝聚中国科技力量,面向世界、面向未来,向全球奉献了一场精彩、非凡、卓越的奥运盛会。
本届冬奥会运用最新科技手段,为全世界观众提供了惊艳的现场转播和全方位覆盖报道,北京冬奥会也成一场上科技含量高的奥运会。赛事活动期间,为了让各类人群都能平等地享受本届冬奥盛会,北京电视台上线了智能手语播报数字人,在《北京新闻》和《北京您早》等节目中进行冬奥专题手语播报,为听障人士带来精彩赛事报道。
最新数据显示,我国听障人群超过2700万,这部分人群与健听人一样,他们对教育、社交、娱乐等信息获取都有巨大的需求。但长期以来,传统人工手语翻译工作量大,且主持人和手语主持人配合难度极高。手语动作表情复杂,语序与正常语序差异大,正常情况下想要熟练掌握手语大约需要2年左右的时间,还要结合语境进行猜测。
受北京市科委科技冬奥专班委托,北京电视台联合凌云光、智谱AI等业内科技公司,在北京市残疾人联合会和市残联聋人协会等支持下,用3个多月时间,让手语播报数字人完成了近10万条手语语料学习,且翻译准确率高达90%。
在如此短的时间内实现这项高难度动作,智能手语数字人是如何做到,在这背后又有哪些技术创新难点?
在多位业内人士看来,近年来人工智能体系建设重点布局在算法层和应用层,数据层建设远远不足,并且针对数字人相关产业,底层数据库的数量、质量和开源程度还明显不足。尤其是国内现有的手语语料数据库数量少,且多以图像、视频等二维平面为主,无法满足AI(人工智能)训练的需求。
同时,因手语语序与中文语序差异大,方言分化更加复杂,且需要通过表情、口型、动作等方式来传达信息。除了传统的二维平面图像、视频采集,三维肢体运动、表情信息数据采集及结构化参数表达外,手语语料数据库建设对三维运动信息捕捉也十分重要。
凌云光手语数字人产品相关负责人介绍,在建设高质量手语语料库的同时,他们充分调研了2022北京冬奥专用手语术语,并联合北京市残联、聋人协会等相关组织机构,进行数据标注,建设手语语义映射关系,不仅完善了国内手语数据库的建设,也为手语推广和AI研究留下了宝贵的数据资产。
该负责人举例说,基于“悟道2.0”超大规模人工智能模型的技术支撑,手语数字脑用计算机模仿听障人士的大脑,将看到的中文文本信息转换成手语词汇序列,包括中文语义蒸馏模型和AI手语分词快编算法的研究。中文语义蒸馏模型用于从输入的文稿或文本中提取出关键的语义信息,将中文文本语义提炼和精简,形成精准匹配适合手语表达的文本;AI手语分词快编算法则用于将蒸馏得到的中文文本,根据冬奥手语语料库划分成相应的手语词汇序列,供数字人做表达输入。
该负责人还提到,数字人是冬奥手语播报的载体和展现形式,通过高精度写实数字人全流程制作方案,可实现一键数字建模,高度还原真人发肤,重新毛孔等细节,更加真实亲切。同时,通过跨模态拟人生成算法,还可以将手语词汇序列,生成相应的动作信息,驱动数字人模型做出相应的动作、手势和表情。(姚坤森)
新春走基层丨厦门北站的巾帼“水总管”******
新华社厦门1月10日电题:厦门北站的巾帼“水总管”
新华社记者颜之宏
1月9日凌晨4点多,天还没亮,厦门的微风带着阵阵寒意,尚有倦意的汪美端已经起床。她给一家人做好早饭,就匆匆赶往厦门北站的工作岗位上。除了照顾家庭,汪美端还有另一重身份,那就是这座繁忙高铁站的“水总管”。
什么是“水总管”?通俗地说,无论是普速列车还是高铁动车,在行驶途中都需要向旅客提供饮用和洗漱用水,这些水由给水员在列车停站期间注入列车自带的水箱中。由于给水员要在列车停站的极短时间内人工完成注水操作,同时还要确保自身在股道上的作业安全,因此铁路职工亲切地称他们为“水总管”。
1月9日,注水完成后,汪美端确认列车水箱水位。新华社记者颜之宏 摄
“G2380列车进站,给水员请加水。”9日5时30分,对讲机里传来指令,厦门北站的首班列车即将发车,汪美端和同事开始在铁路股道上前后忙碌。两个给水员要在15分钟内完成8节车厢的注水任务。汪美端熟练地整理着数十斤重的水管,随后快速插入列车水箱,拧开龙头,随着“哗”的一声响动,自来水喷涌而入,水箱的数显水位表读数开始跃动。
“G2380加水完毕,水管脱离!”在完成8节车厢的注水任务后,汪美端和同事还要再仔细确认水管是否均已脱离列车。在一阵鸣笛声后,列车缓缓出站。
1月9日,完成注水操作后,汪美端目送列车驶离。新华社记者颜之宏 摄
春运期间的厦门北站异常繁忙,需要加水的列车数量从此前的一天四五十趟增加至当前的六七十趟。高铁列车一般是8节车厢,重联动车组是16节,而普速列车有18节车厢,这意味着给水员们的工作量将在这几天翻番。“忙点儿好,忙就是我们铁路人的‘年味儿’。”汪美端说,今年是“新十条”实施后的第一个春运,也是她担任给水员以来的第一个春运。
2022年9月,年近四十的汪美端入职成为一名给水员,而她从事这个工作的原因之一就是要给孩子“树榜样”。原来,汪美端的大女儿去年9月步入高三,作为一名艺考生,每天都要早起练习绘画。对于新的作息规律,处在青春懵懂期的孩子对此有些抵触情绪。“咱们打个赌,你能做到的,妈妈也能做到!”就这样,母女俩定下了一年之约,汪美端也从一名家庭主妇变成“水总管”。
1月9日,列车停站后,汪美端将水管插入列车水箱内完成注水作业。新华社记者 颜之宏 摄
厦门北站的26名给水员,一半由女性组成,今年已经53岁的王彩龙也是其中的一员。“有退休工资、有房租收入,还乐于做又苦又累的给水员。”这是同事们对王彩龙的评价。
四年前,已经做奶奶的王彩龙毅然报名成为一名铁路给水员。“男人们能干的活,我们女人一样能干,而且干得比他们好!”
1月9日,厦门北站的给水员班组在交接班前点名。新华社记者颜之宏 摄
对给水员来说,晴天时,列车扬起的灰尘让人“灰头土脸”;而在雨天中作业,不一会儿就会浑身湿透。9日下午,王彩龙和她的同事们在大雨中给列车补水,列车开行刮起的风快速带走股道上的热量,寒意袭来,王彩龙和她的同事们身体都在微微颤抖……
在今年的返乡途中,当您在列车上斟满一杯热茶或泡上一碗泡面时,看看窗外,或许能看到“水总管”们在春运大幕后的辛勤付出。
(文图:赵筱尘 巫邓炎)