搜狗搜索联合清华首战NTCIR13-STC2,以绝对优势排名第一

时间:2022-09-22 17:49:57 | 浏览:603

雷锋网(公众号:雷锋网) AI 科技评论消息,近日第十三届 NTCIR 评测比赛正式公布了短文本对话任务(STC2)的赛果。搜狗搜索联合清华大学计算机系组成的 SG01 战队首度参战,在 NTCIR13-STC2 评测比赛中以绝对优势排名第

雷锋网(公众号:雷锋网) AI 科技评论消息,近日第十三届 NTCIR 评测比赛正式公布了短文本对话任务(STC2)的赛果。搜狗搜索联合清华大学计算机系组成的 SG01 战队首度参战,在 NTCIR13-STC2 评测比赛中以绝对优势排名第一。

NTCIR Workshop是一个针对信息访问(IA)技术(包括信息检索、问题回答、文本摘要、提取等)的评估比赛。最早由日本学术振兴会(JSPS)和国立情报学研究所(NACSIS)联合赞助,并于1998年开始筹备,并最终在1999年成功举办首届workshop。

经过发展,NTCIR逐渐发展成为一项国际重要赛事,通过设置一系列基于中文、英文、日文三种语料的评测任务,目前NTCIR评测比赛已经举办至第十三届。

雷锋网 AI 科技评论根据资料了解到,在 2016 年,第十二届 NTCIR 中首次设置了基于中文、日文两种语料的评测新任务,即短文本对话任务(STC),这也是目前国际上唯一的“开放域”对话方面的评测比赛。

而其中的短文本对话任务NTCIR13-STC2,在继检索模型对话任务后,首次引入基于深度学习的生成模型对话的任务设置。雷锋网AI科技评论了解到, 本次比赛的主要目的是想将IR、NLP与深度学习研究者联合起来,一同解决自然语言对话,在分享最新研究成果的同时对相关议题进行探讨,共同规划可能有的合作空间。

据雷锋网 AI 科技评论了解,本次赛事共分为两个子任务。在检索任务中,研究者需要基于微博作为中文语料(或 Twitter 作为日语语料),并针对给定的一条新微博,通过给定的以往评论知识库检索到对应的连贯且有效的评论。

每个团队都会提前拿到知识库,此外:

1)在训练阶段,参赛团队可以根据 IR 技术构建自己的会话系统,使用给定的评论作为训练数据。

2)在测试阶段,每个团队都有100个测试查询(帖子),这些帖子并不在原有的知识库中。每个团队需要为每个查询提供十个结果(评论)的列表。这些评论必须源于知识库。

3)在评估阶段,所有参赛的结果汇总会以 0(不适当),1(适用于某些情况),2(适合)进行评分。 此外,评委也会结合IR测试的标准(例如nG@1,nERR@10 和 P+)进行评估。

而在生成任务中,则是希望参赛团队能根据给定帖子生成流畅、连贯且有意义的评论。根据规定,这一任务采用与第一个任务相同的知识库。生成器可通过使用统计机器翻译(SMT)模型或基于 RNN 的神经模型进行建模,当然,参赛团队也可以使用其它 NLG 方法。

1)在训练阶段,参与者可以通过评论知识库作为训练数据,建立自己的生成式对话系统。

2)在测试阶段,每个团队都有100个测试查询(帖子),这些帖子并不在原有的知识库中。每个团队被要求为每个查询提供十个生成结果(评论)的列表。评论不一定要源于知识库。

本次赛事共吸引了包括 BAT 等企业,以及北京大学、中国人民大学等多所知名高校参与,国内共有 11 家企业、29 所大学和研究所参加。最终,搜狗搜索联合清华大学计算机系组成的 SG01 战队,在 STC2 任务中官方指定的检索、生成两种方法上均位列第一名,且与第二名拉开显著差距。

雷锋网原创文章,未经授权禁止转载。详情见转载须知。

相关资讯

谷歌搜索引擎引入诸多实用性改进 利用人工智能帮助用户

谷歌搜索引擎今天引入多项改进,重点利用人工智能方式来帮助用户。这些改进包括为用户提供更具体的答案,更好地处理查询中的错字等等。此外谷歌还宣布对 Google Lens 和其他搜索相关工具的改进。大部分改进都是非常实用的是,而且其中有些也很有

谷歌一次搜索耗能相当于烧开一杯水

英国《每日邮报》16日提到了一个被很多人忽视的问题,互联网搜索功能支撑了人类的信息时代,但搜索引擎所消耗的能源和资源却很少人知道。根据一家欧洲研究机构测算,在谷歌上搜索一次所耗费的能量,相当于烧开一杯水。此前有美国互联网研究机构认为,谷歌搜

凉凉!Google中国版搜索引擎被内部“毙了”

2018年8月首次公布的“蜻蜓计划”(Dragonfly)实际上已被Google放弃。无论是Google工程师还是GoogleCEO Sundar Pichai ,大小场合下都尽量对推出中国搜索引擎的事含糊其辞。但这种“沉默”只会激起更多反

什么是SEO?什么是搜索引擎优化?

什么是搜索引擎优化?本篇文章为SEO入门所需的基础知识,并了解 SEO 成功的 3大秘诀。SEO、HTTPS、CPC、KPI。这些只是 SEO 专业人士每天使用的几个行业术语。然而,如果您是小企业主或该行业的新手,您不知道这些首字母缩略词代

UC神马搜索营销峰会长沙召开 助力中小企业精准营销

红网时刻长沙9月1日讯(通讯员 马申)移动互联网时代,中小企业如何突破互联网营销瓶颈,在互联网激烈的竞争浪潮中“弯道超车”?8月31日,“U势聚 汇智赢”UC神马搜索长沙站营销峰会召开,凭借流量、大数据矩阵、阿里系统资源三大优势,从战略高度

UC神马搜索“U势聚 汇智赢”移动营销全国巡讲大会昆明站落幕

会议现场昆明信息港讯近日,UC神马搜索“U势聚 汇智赢”移动营销全国巡讲大会昆明站落幕,本次大会由云南触动网络科技有限公司承办,旨在为昆明企业主进一步精准定位用户。UC神马搜索云南运营中心网络营销新媒体商战策划专家、搜索营销实战派网络营销专

当今,是移动端的的天下,神马搜索,您移动端推广的最大助力

神马搜索手机,已经普遍的渗入了当今人们的生活,仿佛手机就是自己的一个爱人一般,舍不得离开,深深陷入其中;在每天的大街小巷里,若是仔细观察,你会发现,人人几乎都在低着头,手里捧着手机双目一直盯着屏幕,就好像能瞪出来什么一样,这,就是当今绚丽多

移动搜索的潜行者 神马搜索布局差异化

近日,艾媒咨询发布了《2016上半年中国移动搜索市场研究报告》。报告显示,截止到今年上半年,我国移动搜索市场用户规模达到6.2亿,仍处在上升期。在市场份额方面,百度以44.6%保持领先,阿里巴巴旗下神马搜索以18.5%的市场份额稳居第二;但

2014哪里最好玩?神马搜索年度移动热搜榜告诉你

在快节奏的生活节奏中,手机俨然已经成为了我们必不可少的“小伙伴”,一有任何事情,我们都会习惯性的拿起手机问问,旅游的时候也是一样,目的地的选择、路线规划、各种细节等等,我们都会先打开手机翻翻。走进2015,你还记着你2014年出游的时候搜索

搜索见义勇为丨河南鹤壁:见义勇为没有终点 他们用实际行动展现人间大爱

大河网讯(记者 宋向乐)见义勇为是中华民族的传统美德,也是社会主义核心价值体系重要组成部分。9月23日,“搜索见义勇为 点赞时代英雄”网络媒体采访活动走进河南省鹤壁市,走近见义勇为英雄模范,倾听他们的故事。吕志强掏出被救群众送来的感谢信挽群

友情链接

玩币网天天财经元宇宙中国SEO域名抢注宝宝起名网网站监控比亚迪A股今日保定韦尔股份A股西凤酒股票网今日蚌埠海南旅游网文玩手串交流网山西旅游网世界杯资讯网美的集团A股京东JD美股天天基金行情网姿佳女性健康官网京东方最新消息中国式离婚新能源汽车网南宁午托网实木板材采购网天津旅游网邵阳新闻头条网古井贡酒股票网酒鬼酒股票行情网洋河股份A股今日济南三亚婚纱摄影网咸宁新闻爆料网出国留学网桂林旅游网通威股份A股百事可口可乐股票网
谷歌搜索百度推广网-百度搜索引擎、百度搜索排名、夸克搜索、谷歌搜索入口、万能搜索、全网搜索引擎、搜搜搜索、BT磁力搜索、Google本地搜索、盘古搜索、中国搜索、Google谷歌搜索引擎、360搜索、必应搜索、bing搜索引擎、搜狗搜索、神马搜索、好搜搜索、微软bing搜索。
谷歌搜索百度推广网 22265.cn©2022-2028版权所有