科大讯飞拿下SemEval三项冠军,多语种语言理解再上新台阶

本文章由注册用户 沉静时光 上传提供 2023-05-22 评论 发布 纠错/删除 版权声明 0
摘要:第十六届国际语义评测大赛落下帷幕,科大讯飞在三项主要赛道中拿下冠军,标志着科大讯飞在多语种语言理解领域持续进阶。未来,科大讯飞将不断开展人工智能源头技术创新,助力中国人工智能在全球赢得话语权,实现更多人工智能创新应用真正解决社会刚需,蓬勃向上,生生不息。

2022年4月,第十六届国际语义评测(The 16th International Workshop on Semantic Evaluation, SemEval 2022)大赛落下帷幕,科大讯飞在三项主要赛道中拿下冠军,标志着科大讯飞在多语种语言理解领域持续进阶。

SemEval 2022评测由国际计算语言学协会(Association for Computational Linguistics, ACL)旗下SIGLEX主办,参赛者覆盖国内、外一流高校及知名企业,包括达特茅斯学院、谢菲尔德大学、华为、阿里达摩院等,代表着最前沿国际技术和水平。

经过角逐,科大讯飞分别在“多语种新闻相似度评测任务”(Task 8)、“多语种惯用语识别任务” 子赛道(Task 2: Subtask A one-shot)、“多语种复杂命名实体识别任务”(Task 11)三个子赛道中拿下冠军。

新闻相似度评价:目光如炬

本次SemEval 2022评测聚焦的Task 8是多语种新闻相似度评价任务。科大讯飞与哈尔滨工业大学联合组建的“哈工大讯飞联合实验室”(Joint Laboratory of HIT and iFLYTEK Research,简称HFL)以显著优势摘得冠军。

简单来说,参赛队伍需要在每组新闻中判断是否描述了同一个事件,并以1-4分为两篇新闻的相似度打分,其中包含了多达10种语言,分别为阿拉伯语、德语、英语、西班牙语、法语、意大利语、波兰语、俄语、土耳其语和中文。但新闻相似度究竟是什么?让我们用一则示例为大家解读。

图中列举了两篇相似度极高的新闻稿件,参赛队伍必须将文中相似的主要元素剥离出来并逐一分析,比如地理信息、叙事技巧、实体、语气、时间及风格,最终得出两篇文章的相似度与差异化。

与普通的文章相比,该项比赛更强调跨语言理解能力,除了写作风格和叙述方式外,还需要把握文章中描述的具体事件。通俗来说,该项技术可以甄别外网的一些新闻报道是否存在偏差与曲解,从而有效预防虚假信息、不良信息的传播。

科大讯飞在这样的赛道上拔得头筹,充分展示了在跨语言理解能力上的强硬实力。

惯用语检测:熟能生巧

哈工大讯飞联合实验室拿下的第二项任务冠军,便是Task2 Subtask A的惯用语检测。通俗来说,无论你是哪国人,在日常表达中都有一类短语的固定用法,并且该固定用法通常与短语的字面语义不同,我们会将这些短语称为“惯用语”。想要理解包含惯用语的句子,首先需要判断句子中的多字短语是否为惯用语,比如“说曹操,曹操到。”句中的曹操是否真实存在。

该任务的形式便是给定一个目标语句,包括其上下文和多字短语,继而判断该语句中的多字短语用法究竟是惯用语还是字面意思。该任务为多语言任务,包含英语、葡萄牙语、加利西亚语三种语言。其中加利西亚语没有在训练集中出现过,因此科大讯飞代表队需要在不同语言之间进行迁移学习。

还是不懂?别担心,让我们来看一则示例。

如例所示,Literal表示字面意思,第一句话可翻译为:当你从网中抓一条大鱼时,最好撑住它的腰。Idiomatic表示惯用语,所以第二句话中再次出现了大鱼一词,但却不是简单的字面意思,而是“大人物”。

所以该任务要求参赛队伍区分不同句子中同一个词的不同语义,这需要强大的分析及跨语言理解能力。有了该项技术,在日常写作和翻译工作中,即可有效鉴别惯用语的表达用意,极大提高内容准确率。

科大讯飞不负众望,再摘桂冠。

复杂命名实体识别:披荆斩棘

这第三冠有多难?光听名字就觉得复杂:多语种复杂命名实体识别任务(MutiCoNER)。科大讯飞联合中国科学技术大学语音及语言信息处理国家工程研究中心迎难而上,在该项任务中一举拿下三个子赛道冠军。

我们先拆解一下MuticoNER这个词,Muti是multilingual多语言)的简称,Co即是complex复杂),而NER则是Named Entity Recognition,又称作“命名实体识别”,是指识别文本中具有特定意义的实体,主要包括人名、地名、机构名、专有名词等。

该任务是一个多语言赛道数据集,包含11项单独语言命名实体评测任务,以及2项多语言统一建模的评测任务。该榜单数据来源于Wikidata(维基数据),数据量庞大且极具应用价值。参赛团队需要在单个语言以及多个语言混合的文本数据中,精准预测不同语言实体的类别标签。该任务采用国际通用的槽位F1评价指标, 我们在多语言混合、中文、孟加拉语赛道上,分别以92.9%、81.6%、84.2%的F1成绩登顶。

这项任务究竟有多难?举个例子:NER是指从用户文本中按照业务需求识别出实体的类别,之前任务基本上一句话中仅会出现一到两个实体,本次任务需要抽出多实体增加实体抽取难度,同时需要具备多语种能力,例如【皇马)[organization]除了首轮负于[克星拉科]organization)以外,现在已是四连胜。Rafael van der Vaart)[PER]、Gonzalo Higuaín)[PER]和(Arjen Robben)[PER]的表现出色。】既要识别出多个相关实体,同时是各语种夹杂的文本。

此前针对中文和英文需要单独进行模型建模,此次有关赛道的挑战是仅使用一个模型来可以完成不同语种任务,能够快速识别复杂、专有词汇,提高准确率。

拒绝纸上谈兵,技术应用要落地

当前,人类已进入“人、机、物”智能互联时代,智能语音是这个时代最为关键的入口之一,有助于实现语言大互通,建设人类命运共同体。科大讯飞始终保持初心、坚持源头核心技术创新,在语音、语义等国际赛事中为国争光。

在2021年11月举办的国际低资源多种语音识别竞赛OpenASR中,科大讯飞参加了所有15个语种受限赛道和7个语种非受限赛道,并全部取得了第一名,而在SemEval2022多语种NLP领域中取得佳绩也标志着科大讯飞在多语言理解与跨语言迁移能力再上新台阶,从多语种语音到多语种语言都有着顶尖技术实力。

而在2022年的北京冬奥会和冬残奥会上,科大讯飞作为“官方自动语音转换与翻译独家供应商”,为所有观众展现了一场“无障碍沟通”的体育盛会。

基于强大的多语种语音语言技术,我们可以做到语种足够全、翻译足够准、反应足够快,支持包括冬奥体育在内的16大行业领域翻译,在冬奥应用场景下,中文与英/俄/法/西/日等重点语种的翻译准确率超过90%,平均每句语音翻译响应时间不超过1.5秒,一方面帮助各国观众、游客快速掌握赛事信息,另一方面我们特别希望帮助听障人士运用科技的手段听得见奥运文字,看得见奥运声音。

值得一提的是,科大讯飞AI虚拟人“爱加(i+)”也成为了冬奥会的一名“虚拟志愿者”。在北京冬奥小屋中,爱加可以用多种语言与各国运动员进行面对面的交流,助力冬奥的无障碍沟通。科大讯飞运用语音识别、语音合成、口唇驱动、面部驱动、肢体动作驱动等多项核心技术,打造出虚拟形象自动化内容生产方案,让虚拟人不仅会说普通话,同时支持31种语言及方言,是不折不扣的“语言通”,不仅能进行面对面的冬奥赛事、赛程实时互动交流,还能陪你玩一把冬奥知识游戏大PK,周边交通、文化、旅游等咨询问答也不在话下。

除此之外,在教育、医疗、司法等场景中的各类行业人工智能应用中,多语种语音交互系统都将发挥重要作用。经过多年的技术积累,除了中英以外,当前科大讯飞已经具备其他69种语言的语音识别能力,其中已经有35个语种准确率已经超过90%,并已在新加坡、俄罗斯、印度、日本等国家部署了海外站点,将持续为海内外开发者提供语音识别、语音合成、机器翻译、图文识别等语音语言服务。

如何更好地研发包括中文在内的多语种语音及语言技术的AI能力并实现大规模应用落地,如何更好地用人工智能技术服务社会、建设美好世界,是我们不断奋斗努力的方向。

未来,科大讯飞将不断开展人工智能源头技术创新,助力中国人工智能在全球赢得话语权,实现更多人工智能创新应用真正解决社会刚需,蓬勃向上,生生不息。

网站提醒和声明
本站为注册用户提供信息存储空间服务,非“MAIGOO编辑”、“MAIGOO榜单研究员”、“MAIGOO文章编辑员”上传提供的文章/文字均是注册用户自主发布上传,不代表本站观点,版权归原作者所有,如有侵权、虚假信息、错误信息或任何问题,请及时联系我们,我们将在第一时间删除或更正。 申请删除>> 纠错>> 投诉侵权>> 网页上相关信息的知识产权归网站方所有(包括但不限于文字、图片、图表、著作权、商标权、为用户提供的商业信息等),非经许可不得抄袭或使用。
提交说明: 快速提交发布>> 提交资讯帮助>> 注册登录>>
您还未登录,依《网络安全法》相关要求,请您登录账户后再提交发布信息。点击登录>>如您还未注册,可点击注册>>,感谢您的理解及支持!
最新评论
暂无评论
相关推荐
十大语音翻译器 语音翻译软件哪个好用 语音在线翻译器推荐
语音在线翻译有着广阔的应用前景,是未来的一大发展趋势。在当下,虽然翻译技术限制重重,但仍出现了一批相对出色的语音翻译软件,如谷歌翻译、有道翻...
MAIGOO原创 翻译 世界科技 ★★★
2.3万+ 10
2023年人工智能全球最具影响力学者榜单 2023年AI2000全球人工智能学者名单
2023年全球最具影响力人工智能学者——AI 2000榜单发布,该榜单旨在表彰推动人工智能、计算机科学领域进步和创新的杰出学者。AI 200...
十大人工智能培训机构 ai教育培训机构排名 ChatGPT课程哪个机构的好
人工智能是推动社会发展的重要力量,影响着无人驾驶、机械、物流、3C、医疗等各个领域的发展。本文中买购小编就带大家看看人工智能培训机构哪个好,...
MAIGOO原创 人工智能 培训机构 ★★★
5473 5
自动感应 语音识别,人工智能给生活带来新体验!
随着科技的发展,人工智能越来越被人关注,也对人们的生活带来重大的影响。在人工智能领域,应用最为广泛的技术就是自动感应技术和语音识别技术,将着...
MAIGOO原创 智能数码 人工智能 ★★★★
1430 45
【无人技术与应用】科技改变生活 那些你意想不到的“无人”技术大盘点
如果我们站在今天这个时点回头望,会发现科技永远是大步向前的,无人机、无人仓、无人超市,无人驾驶,无人工厂……层出不穷的“无人X技术”,让我们...
MAIGOO原创 无人机 人工智能 ★★★★
4100 78
展会推荐
展会聚焦
热门展会
2024年04月25日-05月04日
地点:中国国际展览中心新馆(天竺)、中国国际展览中心老馆(静安庄)
已开幕
2024第十八届北京国际汽车展览会,2024北京车展
2024年04月20日-05月30日
地点:寿光国际会展中心
已开幕
2024第二十五届中国(寿光)国际蔬菜科技博览会,第25届菜博会2024
2024年05月01日-04日
地点:广东现代国际展览中心
已开幕
2024东莞春季国际车展,第二十四届广东国际汽车展示交易会·春季
2024年05月08日-10日
地点:宁波国际会议展览中心
距开幕 6
2024宁波国际照明展览会,2024宁波国际照明展
2024年05月12日-14日
地点:郑州国际会展中心
距开幕 10
2024第15届郑州消防安全及应急产业博览会,郑州消防展2024
2024年05月15日-17日
地点:广州市保利世贸博览馆
距开幕 13
2024年第十一届中国国际汽车技术展览会,AUTOTECH 2024广州展
2024年06月12日-14日
地点:上海世博展览馆
距开幕 41
2024第十届中国(上海)国际技术进出口交易会,第10届上交会2024
2024年06月19日-21日
地点:深圳国际会展中心
距开幕 48
2024第十四届深圳国际智能家居展览会,深圳国际智能家居展2024
2024年06月26日-30日
地点:新疆国际会展中心
距开幕 55
第八届中国—亚欧博览会,2024年亚欧博览会
2024年07月08日-11日
地点:广交会展馆、保利世贸博览馆
距开幕 67
2024第26届中国(广州)国际建筑装饰博览会,2024广州建博会
2024年08月03日-05日
地点:北京国家会议中心
距开幕 93
2024第30届北京国际美博会,CIBE北京国际美博会2024
2024年08月08日-11日
地点:长沙红星国际会展中心
距开幕 98
2024长沙百货会,2024第11届中国(长沙)百货批发市场商品交易会暨网红选品会
2024年09月01日-04日
地点:沈阳国际展览中心
距开幕 122
2024第二十二届中国国际装备制造业博览会,中国制博会2024
2024年09月08日-11日
地点:厦门国际会展中心
距开幕 129
2024第二十四届中国国际投资贸易洽谈会,第24届厦门投洽会2024
2024年09月10日-13日
地点:上海新国际博览中心
距开幕 131
2024第二十九届中国国际家具展览会,第29届上海家具展2024
2024年09月24日-28日
地点:南宁国际会展中心
距开幕 145
第21届中国—东盟博览会,2024年东博会
2024年09月25日-27日
地点:北京国家会议中心
距开幕 146
2024年第三十二届中国国际信息通信展览会,第32届PT展2024
2024年10月22日-26日
地点:灯都古镇会展中心
距开幕 173
2024第31届中国古镇国际灯饰博览会,2024年古镇灯博会
2024年11月05日-10日
地点:上海国家会展中心
距开幕 187
2024第七届中国国际进口博览会,2024年上海进博会
2024年11月05日-08日
地点:余姚中塑国际会展中心
距开幕 187
2024中国(余姚)国际塑料博览会曁第25届中国塑料博览会
2024年11月12日-17日
地点:珠海国际航展中心
距开幕 194
2024第十五届中国国际航空航天博览会,2024中国航展,2024珠海航展
2024年11月22日-25日
地点:上海国家会展中心
距开幕 204
2024第五届长三角国际文化产业博览会,第5届长三角文博会2024
2024年12月18日-20日
地点:上海新国际博览中心
距开幕 230
2024第二十届中国(上海)国际压铸展览会,上海压铸展2024
2024年01月18日-22日
地点:山东国际会展中心
已闭幕
2024全国年货购物节暨第二十一届济南年货会,2024济南年货会
2024年01月23日-02月04日
地点:成都世纪城新国际会展中心
已闭幕
2024第27届中国(四川)新春年货购物节,2024年四川新春年货购物节
2024年04月21日-23日
地点:山东国际会展中心
已闭幕
2024第95届全国汽车配件交易会,2024济南全国汽配会
2024年04月11日-14日
地点:成都世纪城新国际会展中心
已闭幕
2024第12届成都汽车消费节暨第8届房车生活节
2024年01月23日-02月07日
地点:西安国际会展中心
已闭幕
2024第十九届西安新春年货购物节,西安年货会2024
2024年04月13日-18日
地点:海南国际会展中心
已闭幕
2024第四届中国国际消费品博览会,第四届消博会2024
2024年03月01日-03日
地点:深圳国际会展中心
已闭幕
2024中国糖果零食展览会,中国糖果零食展2024