让“无声世界”感受赛场魅力!带你看看冬奥手语数字人有哪些奥秘******
2022年2月4日,第24届冬季奥林匹克运动会在北京举行,让世界目光再次聚焦中国。本届北京冬奥会秉持绿色、共享、开放、廉洁的办赛理念,凝聚中国科技力量,面向世界、面向未来,向全球奉献了一场精彩、非凡、卓越的奥运盛会。
本届冬奥会运用最新科技手段,为全世界观众提供了惊艳的现场转播和全方位覆盖报道,北京冬奥会也成一场上科技含量高的奥运会。赛事活动期间,为了让各类人群都能平等地享受本届冬奥盛会,北京电视台上线了智能手语播报数字人,在《北京新闻》和《北京您早》等节目中进行冬奥专题手语播报,为听障人士带来精彩赛事报道。
最新数据显示,我国听障人群超过2700万,这部分人群与健听人一样,他们对教育、社交、娱乐等信息获取都有巨大的需求。但长期以来,传统人工手语翻译工作量大,且主持人和手语主持人配合难度极高。手语动作表情复杂,语序与正常语序差异大,正常情况下想要熟练掌握手语大约需要2年左右的时间,还要结合语境进行猜测。
受北京市科委科技冬奥专班委托,北京电视台联合凌云光、智谱AI等业内科技公司,在北京市残疾人联合会和市残联聋人协会等支持下,用3个多月时间,让手语播报数字人完成了近10万条手语语料学习,且翻译准确率高达90%。
在如此短的时间内实现这项高难度动作,智能手语数字人是如何做到,在这背后又有哪些技术创新难点?
在多位业内人士看来,近年来人工智能体系建设重点布局在算法层和应用层,数据层建设远远不足,并且针对数字人相关产业,底层数据库的数量、质量和开源程度还明显不足。尤其是国内现有的手语语料数据库数量少,且多以图像、视频等二维平面为主,无法满足AI(人工智能)训练的需求。
同时,因手语语序与中文语序差异大,方言分化更加复杂,且需要通过表情、口型、动作等方式来传达信息。除了传统的二维平面图像、视频采集,三维肢体运动、表情信息数据采集及结构化参数表达外,手语语料数据库建设对三维运动信息捕捉也十分重要。
凌云光手语数字人产品相关负责人介绍,在建设高质量手语语料库的同时,他们充分调研了2022北京冬奥专用手语术语,并联合北京市残联、聋人协会等相关组织机构,进行数据标注,建设手语语义映射关系,不仅完善了国内手语数据库的建设,也为手语推广和AI研究留下了宝贵的数据资产。
该负责人举例说,基于“悟道2.0”超大规模人工智能模型的技术支撑,手语数字脑用计算机模仿听障人士的大脑,将看到的中文文本信息转换成手语词汇序列,包括中文语义蒸馏模型和AI手语分词快编算法的研究。中文语义蒸馏模型用于从输入的文稿或文本中提取出关键的语义信息,将中文文本语义提炼和精简,形成精准匹配适合手语表达的文本;AI手语分词快编算法则用于将蒸馏得到的中文文本,根据冬奥手语语料库划分成相应的手语词汇序列,供数字人做表达输入。
该负责人还提到,数字人是冬奥手语播报的载体和展现形式,通过高精度写实数字人全流程制作方案,可实现一键数字建模,高度还原真人发肤,重新毛孔等细节,更加真实亲切。同时,通过跨模态拟人生成算法,还可以将手语词汇序列,生成相应的动作信息,驱动数字人模型做出相应的动作、手势和表情。(姚坤森)
我国大部地区将出现寒潮雨雪天气******
一、天气实况
1、国内实况
昨日新疆北部出现降雪和大风降温天气 今晨河南山东江苏等地有大雾
昨日08时至今日06时,新疆伊犁及沿天山地区等地出现中到大雪,乌鲁木齐和克拉玛依局地暴雪(10~11毫米);广西东部和南部、广东中西部、海南岛东南部以及台湾岛东部等地部分地区出现中雨或大雨,局地暴雨(50~66毫米)。
今日05时较昨日05时,新疆北部等地出现6~10℃降温,局地降幅超过12℃;上述地区及甘肃西部等地有7~9级、局地10~12级阵风。
今晨,河南、山东、安徽中北部、江苏及四川盆地西部等地出现部分地区能见度不足1公里的大雾,河南中部、山东南部、江苏北部等局地不足100米。另外,新疆东部和南疆盆地出现沙尘天气,局地沙尘暴。
2、国外实况
(1) 西伯利亚南部欧洲中南部有较强雨雪
过去24小时,东欧东部、大高加索地区、西伯利亚中南部、远东地区中南部、贝加尔湖地区、哈萨克丘陵南部、伊朗高原北部、阿拉斯加地区、五大湖地区等地出现小到中雪,局地大到暴雪;西欧南部、中欧东部和南部、南欧东部、美索不达米亚平原南部、中南半岛南部、菲律宾群岛中南部、大巽他群岛、新西兰北岛、美国西部沿岸、巴西高原南部等地部分地区出现小到中雨,局地大到暴雨。
(2) 北美气温偏高 东欧中亚气温偏低
过去24小时,北欧、南欧东部、蒙古高原、贝加尔湖地区、加拿大中西部、美国北部、阿根廷中部等地日平均气温较常年同期偏高4~8℃,局地偏高10℃以上;东欧大部、中亚、西伯利亚北部日平均气温较常年同期偏低6~10℃,局地偏低12℃以上。
二、重点天气预报
1、国内重点天气
我国大部地区将出现寒潮雨雪天气
受强冷空气及南支槽影响,12日至15日,我国大部地区将先后出现雨雪及大风降温天气。其中西北地区东部、华北、东北地区大部、黄淮、江淮、江汉、西南地区东部、江南北部等地将有小到中雨转小到中雪或雨夹雪,部分地区大雪,局地暴雪;江南中南部、华南等地有小到中雨,部分地区大雨,局地暴雨,部分地区伴有雷电天气。1月12日08时至1月16日08时,寒潮天气将自西向东影响我国大部地区,其中,12日主要影响西北地区,13日至15日影响我国中东部地区。我国大部地区气温将先后下降8~12℃,其中,新疆沿天山以北、甘肃西部和中南部、内蒙古中东部、东北地区、江汉东部、江淮、江南、华南北部、贵州等地降温14~18℃,内蒙古中东部、黑龙江东部、吉林东部、辽宁东北部等地的部分地区降温超过20℃,并伴有4~6级、阵风6~8级的大风,新疆山口风力可达9~11级或以上。东部和南部海区有7~9级风,阵风可达10~11级。降温过后,17日早晨,最低气温0℃线将南压至云南东部至贵州南部、湖南南部、福建北部、浙江东部一线(见图1)。
1月12日08时至1月14日08时,新疆沿天山以北、甘肃大部、宁夏、陕西北部、内蒙古大部、东北地区等地部分地区将先后降温8~12℃,其中,新疆沿天山以北、内蒙古中东部、黑龙江中东部、吉林东部、辽宁东北部等地部分地区降温14~16℃,局地可超过18~20℃。新疆东部、甘肃中西部、内蒙古大部、东北地区、华北等地有6~8级大风,新疆山口风力可达9~11级或以上。东部海区有7~9级风,阵风可达10~11级。新疆东部和南部、青海西北部、甘肃西部和东部、内蒙古西部、宁夏、陕西北部等地有扬沙或浮尘,局地有沙尘暴(见图2)。中央气象台1月12日06时继续发布寒潮蓝色预警。
图1 全国
大风降温
预报图(1月12日08时-16日08时)
图
2
全国
大风降温
预报图
(1月12日08时-14日08时)
2、国外重点天气
(1)东亚有寒潮天气
未来三天,帕米尔高原、贝加尔湖地区、蒙古高原、远东地区西南部等地将有6~12℃降温,部分地区降温12℃以上,伴有4~6级风,部分地区6级以上风,上述地区将有小到中雪或雨夹雪,局地大到暴雪。
(2)北美西部和东部沿岸有较强雨雪
未来三天,加南大西南部、拉布拉多半岛南部、美国西部有中到大雪或雨夹雪,局地暴雪到大暴雪,美国西部和东北部沿海地区有中到大雨,局地暴雨。
(3)澳大利亚南部阿根廷北部有高温天气
未来三天,澳大利亚南部、阿根廷北部部分地区有高温天气,日最高气温35~37℃,局地可达40℃左右。
三、未来三天具体预报
1月12日08时至13日08时,新疆南疆盆地西部、甘肃西部、青海西部、内蒙古大部、黑龙江西北部和东部、吉林和辽宁东部、华北北部等地部分地区有小到中雪或雨夹雪,其中,新疆南疆盆地和南疆西部山区等地部分地区有大到暴雪(10~16毫米)。东北地区西部、华北中南部、黄淮、江淮、江汉大部、西南地区东北部、江南、华南大部、台湾岛大部等地部分地区有小到中雨,其中,安徽南部、江西北部和南部、浙江北部、广西东部、广东西北部等地部分地区有大雨(25~45毫米)。新疆东部和南疆盆地、甘肃河西、内蒙古中东部、吉林西部等地部分地区有4~6级风,其中,新疆山口地区风力可达9~11级及以上。新疆东部和南部、青海西北部、甘肃西部和东部、内蒙古西部、宁夏、陕西北部等地部分地区有扬沙或浮尘,局地有沙尘暴(见图3)。
图3 全国降水量预报图(1月12日08时-13日08时)
1月13日08时至14日08时,新疆南疆盆地西部、青海北部、甘肃大部、宁夏、陕西中北部、山西、内蒙古大部、河北、北京、天津、东北地区大部等地部分地区有小到中雪或雨夹雪,其中,新疆南疆西部山区、陕西中南部、山西大部、河南西部等地部分地区有大到暴雪(10~15毫米)。辽东半岛、山东半岛、江淮、江汉、江南、西南地区东部、华南大部等地部分地区有小到中雨,其中,河南南部、安徽西北部、湖北东部、江西东部、浙江中南部、福建西北部等地部分地区有大雨(25~45毫米)。新疆南疆盆地、内蒙古西北部、陕西北部、黑龙江东北部、吉林西部、河南南部、江苏北部等地部分地区有4~6级风,其中,新疆东部部分地区有6~7级风。渤海、渤海海峡、黄海大部海域、将有6~8级、阵风9级的偏北风,其中渤海部分海域风力可达9级、阵风10~11级(见图4)。
图4 全国降水量预报图(1月13日08时-14日08时)
1月14日08时至15日08时,新疆南部、西藏东南部、青海、甘肃中东部、宁夏、陕西、山西、河北中西部、山东、河南、湖北等地部分地区有小到中雪,其中,陕西中南部、山西南部、河南北部、湖北西部、四川盆地北部、重庆东北部等地部分地区有大到暴雪(10~15毫米)。江淮大部、江南大部、西南地区东南部、华南、台湾岛等地部分地区有小到中雨。新疆沿天山地区和南疆盆地、甘肃河西、山西北部、黑龙江东北部、河南、湖南、江西北部、四川盆地等地部分地区有4~6级风,其中,内蒙古北部、青海西部等地部分地区有6~7级风。渤海、渤海海峡、黄海大部海域、东海大部海域、台湾海峡、台湾以东洋面将有6~8级、阵风9级的偏北风,其中渤海部分海域风力可达9级、阵风10~11级(见图5)。
图5 全国降水量预报图(1月14日08时-15日08时)
制作:张小雯 张夕迪 李坤玉 签发:陈涛
(文图:赵筱尘 巫邓炎)