36kr 2024年07月18日
清华夺SIGIR 2024「时间检验+最佳论文奖」,中国大陆研究机构首次牵头获奖
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

清华计算机系在信息检索领域顶级会议SIGIR 2024中取得重大突破,两篇论文分别获得最佳论文奖和时间检验奖。最佳论文奖论文研究了稠密信息检索中的Scaling Law,验证了其适用性,为搜索引擎和推荐系统设计提供重要指导。时间检验奖论文则首次定义了「可解释性推荐」问题,并设计了相应的情感分析算法,在互联网推荐系统设计与实现中发挥重要作用。

😄 **最佳论文奖:Scaling Laws For Dense Retrieval** 这篇获奖论文由清华计算机系的方言、詹靖涛等研究人员完成,这是中国大陆研究机构首次牵头获得该奖项。 论文主要研究了稠密信息检索中的Scaling Law,即深度神经网络模型的性能是否与参数规模呈正相关性。研究人员设计了新型检索性能评价范式,验证了Scaling Law在稠密信息检索中的适用性。该研究成果对搜索引擎、推荐系统等信息检索系统的设计具有重要的指导意义。 论文地址:https://dl.acm.org/doi/abs/10.1145/3626772.3657743

🎉 **时间检验奖:Explicit factor models for explainable recommendation based on phrase-level sentiment analysis** 这篇论文发表在2014年,由清华计算机系的张永锋、赖国堃等研究人员完成。该论文首次定义了「可解释性推荐」问题,并设计了相应的情感分析算法,以解决这一技术挑战。 自2014年发表以来,该论文在互联网推荐系统的设计与实现中一直发挥着重要的引领作用。根据Google Scholar的统计,截至目前,该论文被引数近千次。 论文地址:https://dl.acm.org/doi/10.1145/2600428.2609579

🏆 **其他奖项** 除了最佳论文奖和时间检验奖之外,清华计算机系助理教授艾清遥还获得了SIGIR 2024的「青年学者奖」,这也是中国大陆研究学者首次拿下该奖项。

🥇 **SIGIR 2024概况** 今年是国际计算机学会信息检索大会(SIGIR)第47届会议,于7月14日-18日在美国华盛顿特区正式召开。会议共收到1148篇投稿,其中791篇有效投稿,仅有159篇长文被录用,录用率为20.1%。从各研究机构教师的论文数量来看,今年亚洲的贡献似乎最大。

【导读】刚刚,信息检索领域的国际顶会SIGIR 2024,公布了最终获奖结果。在所有获奖名单中,来自清华计算机系的团队们斩获了两大奖项——时间检验奖、最佳论文奖,实至名归!

一年一届的信息检索领域顶会SIGIR 2024,终于开奖了!

今年,SIGIR组委会暂未汇总公布所有的获奖名单,不过已经有机构/网友纷纷晒出了自己的成绩单。

值得一提的是,清华计算机系今年一次摘得多项大奖:

2014年发表的论文斩获SIGIR 2024唯一「时间检验奖」,另一篇论文获得「最佳论文奖」。

网友对此表示热烈祝贺,「实至名归」!

另外,CS系助理教授艾清遥还获得了「青年学者奖」,这也是中国大陆研究学者首次拿下该奖项。

除清华艾清遥之外,还有微软研究院Bhaskar Mitra、拉德堡德大学Harrle Oosterhuis,以及中科大Xiang Wang教授(王翔)成为青年学者奖的获奖者!

此外,还有社区奖、DEI奖的三位获奖者。

今年,是国际计算机学会信息检索大会(SIGIR)第47届会议,于7月14日-18日在美国华盛顿特区正式召开。

这次会议共收到1148篇投稿,其中有791篇是有效投稿,仅有159篇长文被录用,录用率为20.1%。相较于CVPR、ICML这样的顶会,投稿数少了一大截。

根据艾清遥对接受论文的统计,从各研究机构教师的论文数量来看,今年亚洲的贡献似乎最大。

接下来,一起看看大家的获奖成果。

清华CS系抱走两项大奖

最佳论文奖——Scaling Laws For Dense Retrieval

这篇获奖论文,由共同一作方言、詹靖涛,指导老师艾清遥助理教授、刘奕群教授完成的论文。

这是来自中国大陆的研究机构首次牵头获得该奖项。

论文地址:https://dl.acm.org/doi/abs/10.1145/3626772.3657743

Scaling Law早已成为大模型公认的定律,即LLM智能水平与参数规模呈正相关性,成为大模型区别于传统AI模型的重要特征。

然而,这一定律是否适用于其他深度神经网络模型,仍旧存在巨大的争论。

在这项研究中,作者针对这一问题展开了深入的研究。

他们设计了新型检索性能评价范式,验证了Scaling Law在稠密信息检索中的适用性。

这对搜索引擎、推荐系统等信息检索系统的设计,将发挥重要的指导作用。

时间检验奖——Explicit factor models for explainable recommendation based on phrase-level sentiment analysis

时间检验奖,通常颁给10年以上的产生重要持久影响的学术论文。

这篇发表在2014年的论文,由时任计算机系张永锋博士、赖国堃等学生,在张敏教授、刘奕群教授、马少平教授指导下完成。

清华官微称,自2014年以来,这项「可解释性推荐」研究自发表以来,在互联网推荐系统的设计与实现中一直发挥着重要的引领作用。

正如论文题目所示,研究中首次定义了「可解释性推荐」的问题。

同时,研究人员设计了相应的情感分析算法,以解决这一技术挑战,

论文地址:https://dl.acm.org/doi/10.1145/2600428.2609579

根据Google Scholar的统计,截至目前,这篇论文被引数近千次。

其他奖项

最佳论文提名

来自山东大学、莱顿大学、阿姆斯特丹大学的研究人员发表的论文——Generative Retrieval as Multi-Vector Dense Retrieval,获得了最佳论文提名。

研究中,作者介绍了生成式检索在给定查询的情况下,使用序列-序列架构,以端对端的方式生成相关文档的标识符。

当前,生成式检索与其他检索方法(尤其是密集检索)的关系尚未完全清晰。

先前的研究发现,使用原子标识符的生成式检索,等同于单向量密集检索。然而,以前的研究仅关注检索阶段,而未考虑生成式检索解码器内部的深层交互。

本文通过证明生成式检索和多向量密集检索,共享衡量文档与查询相关性的框架来填补这一空白。

论文地址:https://arxiv.org/pdf/2404.00684

最佳论文奖亚军

还有一篇来自格拉斯哥大学和比萨大学的研究人员发表的A Reproducibility Study of PLAID,获得了最佳论文奖亚军。

此前研究中,ColBERTv2的PLAID(Performance-optimized Late Interaction Driver)算法,使用聚类的术语表示来检索和逐步筛选文档,以进行最终(精确)的文档评分。

最新论文,研究人员重现了原始工作,并填补了其中的空白。

通过研究PLAID引入的参数,作者发现了其帕累托前沿(Pareto frontier)是由三个参数之间的精心平衡形成的。

而超出建议设置的偏差可能会大幅增加延迟,而不一定能提高其效果。

之后,研究比较了PLAID和对BM25结果进行重新排序的方法,在低延迟情况下,重新排序方法表现更好。但在高延迟情况下,重新排序方法难以达到最佳效果。

论文地址:https://arxiv.org/pdf/2404.14989

最佳短论文奖

来自马萨诸塞大学阿默斯特分校的研究人员发表的Evaluating Retrieval Quality in Retrieval-Augmented Generation,获得了本届SIGIR最佳短论文奖。

这篇获奖论文,仅有6页。

研究中,提出了一种全新的评估检索增强生成(RAG)系统的方法,名为eRAG。

之所以提出全新的方式,是因为当前RAG系统评估面临着挑战。

论文地址:https://arxiv.org/pdf/2404.13781

一是传统的端到端评估方法计算成本高,另一个是基于查询-文档相关性标签的检索模型评估,与RAG系统的下游性能相关性较小。

eRAG方法可以将检索列表中的每个文档,都被单独输入到RAG系统的大模型中,针对每个文档生成的输出都基于下游任务的真实标签进行评估。

结果显示,eRAG显著改善了运行时间。相较于端到端的评估,GPU内存消耗减少了最多50倍。

参考资料: 

https://x.com/thudcst/status/1813395091723272199 

https://x.com/QingyaoAi/status/1785245799439630351 

https://mp.weixin.qq.com/s/4SPX31Rt-j75pYHcBmGdTA 

本文来自微信公众号“新智元”,编辑:桃子 好困,36氪经授权发布。

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

SIGIR 信息检索 清华 最佳论文奖 时间检验奖 Scaling Law 稠密信息检索 可解释性推荐
相关文章