论文下载地址：https://arxiv.org/pdf/2106.02545.pdf
一、学习排序（Learning to Rank） LTR（Learning torank）学习排序是一种监督学习（SupervisedLearning）的排序方法。LTR已经被广泛应用到文本挖掘的很多领域，比如IR中排序返回的文档，推荐系统中的候选产品、用户排序，机器翻译中排序候选翻译结果等等。IR领域传统的排序方法一般通过构造相关度函数，然后按照相关度进行排序。影响相关度的因素很多，比如上面提到的tf，idf，dl等。有很多经典的模型来完成这一任务，比如VSM，Boolean model，概率
基于微软大规模真实场景数据的阅读理解数据集MS MARCO，美团搜索与NLP中心提出了一种针对该文本检索任务的BERT算法方案DR-BERT，该方案是第一个在官方评测指标MRR@10上突破0.4的模型。
模型是机器学习三问里面的怎么去学的环节。是确定特征与因变量之间关系最为核心的步骤。这部分涉及到模型的选择，和优化目标以及损失函数的选取。排序由第一节讲到，LTR有三个模式，分别是pointwise, pairwise,listwise。在这里主要描述一下采用的模型Lightgbm模型。在后面我们将看到选择什么样的决策函数（优化目标）就会带来什么的效果。最后基于对于整个数据业务和模型的理解，实现了在listwise的模型下CTR和转化率各0.6的提升；在pointwise的模型下，实现转化率3个点的提升
机器学习排序 机器学习排序（Machine Learning to rank， 简称MLR） 机器学习排序系统框架 机器学习排序系统一般分为离线学习系统和在线预测排序系统。离线系统的设计需要靠特征的选
导语 PaddlePaddle提供了丰富的运算单元，帮助大家以模块化的方式构建起千变万化的深度学习模型来解决不同的应用问题。这里，我们针对常见的机器学习任务，提供了不同的神经网络模型供大家学习和使用。本周推文目录如下： 周一：【点击率预估】 Wide&deep 点击率预估模型 周二：【文本分类】 基于DNN/CNN的情感分类 周三：【文本分类】 基于双层序列的文本分类模型 周四：【排序学习】 基于Pairwise和Listwise的排序学习 周五：【结构化语义模型】 深度结构化语义模型 排序学习(Lear
蒸馏可以提供student在one-shot label上学不到的soft label信息，这些里面包含了类别间信息，以及student小网络学不到而teacher网络可以学到的特征表示‘知识’，所以一般可以提高student网络的精度。
【导读】专知内容组整理了最近七篇推荐系统（Recommender System）相关文章，为大家进行介绍，欢迎查看! 1. Collaborative Metric Learning Recommendation System: Application to Theatrical Movie Releases（协同度量学习推荐系统:应用于影院电影发行） ---- 作者：Miguel Campo,JJ Espinoza,Julie Rieger,Abhinav Taliyan 摘要：Product recom
搜索排序：在一次会话中，用户在交互界面输入需要查询的query，系统给返回其排好序的doc例表的过程。
当应用于搜索时，匹配学习可以描述如下。一组查询文档对D=（q1，d1，r1），（q2，d2，r2），...，（qN，dN，rN）作为训练数据给出，其中 i 和 qi，di和ri（i=1，...，N）分别表示查询，文档和查询文档匹配度（相关性）。每个元组 r）∈D的生成方式如下：查询q根据概率分布P（q）生成，文档d根据条件概率分布P（d∣q）生成，并且相关性r是根据条件概率分布 P（r∣q，d）生成的。这符合以下事实：将query独立提交给搜索系统，使用query words检索与query关联的文档，并且文档与query的相关性由query和文档的内容确定。带有人类标签的数据或点击数据可以用作训练数据。
已经提出了使用传统的机器学习技术进行搜索中的查询文档匹配和推荐中的用户项目匹配的方法。这些方法可以在一个更通用的框架内形式化，我们称之为“学习匹配”。除了搜索和推荐外，它还适用于其他应用，例如释义，问题解答和自然语言对话。本节首先给出学习匹配的正式定义。然后，它介绍了传统学习以匹配为搜索和推荐而开发的方法。最后，它提供了该方向的进一步阅读。
Learning to Rank，即排序学习，简称为 L2R，它是构建排序模型的机器学习方法，在信息检索、自然语言处理、数据挖掘等场景中具有重要的作用。其达到的效果是：给定一组文档，对任意查询请求给出反映文档相关性的文档排序。本文简单介绍一下 L2R 的基本算法及评价指标。 背景 随着互联网的快速发展，L2R 技术也越来越受到关注，这是机器学习常见的任务之一。信息检索时，给定一个查询目标，我们需要算出最符合要求的结果并返回，这里面涉及一些特征计算、匹配等算法，对于海量的数据，如果仅靠人工来干预其中的一些参
今天分享一篇谷歌在CIKM'18上发表的排序学习listwise损失函数优化的论文「LambdaLoss」[1]，可以认为是沿袭着微软早期代表性工作[2]的路线，即：
【导读】本文作者根据两篇工业界背景的论文解答了 RL 在推荐场景需要解决的问题与困难，以及入门需要学习得相关知识点。
重排器（Reranker）作为信息检索的第二阶段，需要根据查询和文档的相关性，对候选文档做细粒度的排序。经典的重排方法一般使用交叉编码器，结合文档和查询的语义信息进行打分和排序。
题目： Adaptive Pointwise-Pairwise Learning-to-Rank for Content-based Personalized Recommendation
最近正好在做KDD Cup：Debiasing赛道，不同于其它类型的比赛，推荐系统中的排序建模需要大家自己构建正负样本。本文也将作为方法梳理，希望能帮助到大家。
全球性的搜索引擎 Google，看似简单的搜索框背后隐藏的是极其复杂的系统架构和搜索算法，其中排序（以下统称 Ranking）的架构和算法更是关键部分。Google 正是通过 PageRank 算法深刻改变搜索排序而一举击败众多竞争对手。本文将介绍有关搜索引擎排序的相关技术内容。
在科学研究中，从方法论上来讲，都应“先见森林，再见树木”。当前，人工智能学术研究方兴未艾，技术迅猛发展，可谓万木争荣，日新月异。对于AI从业者来说，在广袤的知识森林中，系统梳理脉络，才能更好地把握趋势。为此，我们精选国内外优秀的综述文章，开辟“综述专栏”，敬请关注。
说到learning to rank,大家应该都比较熟悉,但是说到用XGB做learning to rank,很少有人实现过.举个例子,比方说赛马,我们可以基于马的个头,体重,历史战绩等信息,建立XGB模型,进行二分类,最后选择赢的概率最高的马.这样做并没有问题,但是考虑到马是否能跑赢,和对手紧密相关,不管我选的马能力如何,只要他能跑赢同场比赛其他马即可,这就是排序.
智能监控通常包括了俩个方面： 检测+告警。目前的智能监控一般在检测层都实现了智能化（统计分析算法、机器学习算法等方案），例如3-sigma，EWMA，决策树，xgboost，DNN等。 但目前告警则更多的聚焦在告警合并（或者叫告警收敛）上， 而对于告警分级，目前常用的方案仍然是运维人员预先设定分级的方案。
作者 | 吴海波 责编 | 何永灿 通常机器学习在电商领域有三大应用：推荐、搜索、广告，这次我们聊聊三个领域里都会涉及到的商品排序问题。从业务角度，一般是在一个召回的商品集合里，通过对商品排序，追求GMV或者点击量最大化。进一步讲，就是基于一个目标，如何让流量的利用效率最高。很自然的，如果我们可以准确预估每个商品的GMV转化率或者点击率，就可以最大化利用流量，从而收益最大。 蘑菇街是一个年轻女性垂直电商平台，主要从事服饰鞋包类目，2015年时全年GMV超过了百亿，后与美丽说合并后公司更名为美丽联合集团。2
全文1.2W字，PC阅读戳：https://f0jb1v8xcai.feishu.cn/wiki/LPlAwm6vSiesFBkysh8csZYfn1g
本文介绍了大众点评搜索核心排序层模型的演化之路，包括结合知识图谱信息构建适合搜索场景的Listwise深度学习排序模型LambdaDNN以及特征工程实践和相关工具建设。
在搜索、推荐、广告等需要进行大规模排序的场景，级联排序架构得到了非常广泛的应用。以在线广告系统为例，按顺序一般包含召回、粗排、精排、重排等模块。粗排在召回和精排之间，一般需要从上万个广告集合中选择出几百个符合后链路目标的候选广告，并送给后面的精排模块。粗排有很严格的时间要求，一般需要在10～20ms内完成打分。在如此巨大的打分量以及如此严格的RT需求下，粗排是如何平衡算力、RT以及最后的打分效果呢？
数据清理/探索性数据分析阶段的主要问题之一是处理缺失值。缺失值表示未在观察值中作为变量存储的数据值。这个问题在几乎所有研究中都是常见的，并且可能对可从数据得出的结论产生重大影响。
最早主要是利用词频、逆文档频率和文档长度这几个因子来人工拟合排序公式。因为考虑因素不多，由人工进行公式拟合是完全可行的，此时机器学习并不能派上很大用场，因为机器学习更适合采用很多特征来进行公式拟合。此外，对于有监督机器学习来说，首先需要大量的训练数据，在此基础上才可能自动学习排序模型，单靠人工标注大量的训练数据不太现实。
人工智能兼具技术属性和社会属性高度融合特点，是新时代经济发展新引擎、社会发展加速器。为加快建设创新型国家，深入实施创新驱动发展，理当精准把握人工智能领域的发展大势。 常言道：“功以才成，业由才广。”抢占顶尖人才制高点，也便意味着具备了占据该领域的先机。不过，当面对人工智能领域顶尖人才的匮乏现状和日甚一日的渴求心理，是花费巨资普遍撒网争夺引进还是着眼于长远可持续培养，University AI 选择了 hard way 模式，即花费大量心血从人才本身出发的长远可持续性培养，和百度 AI 的目标非常契合，随即大
LTR（Learning to Rank）学习排序已经被广泛应用到文本挖掘、搜索推荐系统的很多领域，比如IR中排序返回的相似文档，推荐系统中的候选产品召回、用户排序等，机器翻译中排序候选翻译结果等等。
AI 科技评论按：日前，谷歌 AI 发布了最新成果 TF-Ranking，它是一个专门针对排序学习（learning-to-rank）应用的可扩展 TensorFlow 库。TF-Ranking 快速且易用，并能创建高质量的排序模型，对构建 web 搜索或新闻推荐等基于真实世界数据的排序系统感兴趣的人，都可以将 TF-Ranking 作为强稳的、可扩展的解决方案。
我在数据清理/探索性分析中遇到的最常见问题之一是处理缺失的值。首先，要明白没有好的方法来处理丢失的数据。根据问题的类型，我遇到过不同的数据归集解决方案-时间序列分析，ML，回归等，很难提供一个通用的解决方案。在篇文章中，我试图总结最常用的方法，并试图找到一个结构化的解决方案。
导语 | 重排技术细节非常多，一定要清楚技术架构大图，从而将细节串联起来。实际上主要是为了解决三大方面的问题：用户体验、算法效率、流量调控。 在上篇《图文解读：推荐算法架构——精排！》中我们结合算法架构精排进行解读分析，本篇将深入重排这部分进行阐述。 一、总体架构 精排打分完成后，就到了重排阶段，之后可能还会有混排。召回、精排、重排三个模块中，重排离最终的用户展现最近，所以也十分关键。重排的技术点也十分多，总结下来，个人认为重排主要是为了解决三大方面的问题：用户体验、算法效率、流量调控。下图是重排总体架构：
2. Parallel Recurrent Neural Network Architectures for Feature-rich Session-based Recommendations
在互联网高速发展的今天，越来越复杂的特征被应用到搜索中，对于检索模型的排序，基本的业务规则排序或者人工调参的方式已经不能满足需求了，此时由于大数据的加持，机器学习、深度学习成为了一项可以选择的方式。
目前信息检索(Information Retrieval)几乎都是使用深度学习系列的方法，即NeuIR(neural information retrieval)。而随着预训练在深度学习领域的大放光芒，信息检索中也出现了各种预训练策略。这篇文章博主将整理来自清华大学与中科院的信息检索综述，先上路径。
在矩阵分解在协同过滤推荐算法中的应用中，我们讨论过像funkSVD之类的矩阵分解方法如何用于推荐。今天我们讲另一种在实际产品中用的比较多的推荐算法:贝叶斯个性化排序(Bayesian Personalized Ranking, 以下简称BPR)，它也用到了矩阵分解，但是和funkSVD家族却有很多不同之处。下面我们来详细讨论。
1写在前面 我们在处理数据的时候常常会遇到存在缺失值(NA)的情况，如何处理就仁者见仁，智者见智了。🤒 最简单粗暴的方法可能就是行删除法(listwise)或者个案删除法(case-wise)了，这种方法在缺失值比较少的情况下比较适用，但在NA较多的情况下可能就会丢失过多信息导致无法继续分析。😘 本期我们介绍一下mice包和ggmice包这两只可爱的小老鼠，全名Multivariate Imputation by Chained Equations, mice，即链式方程多重填补。📍 一张图总结基本原理，嘿
大家好，这里是NewBeeNLP。现在的推荐系统都是一个很大的漏斗，将整个推荐系统分为（recall -> pre-rank -> rank -> rerank）。
最近整理了AAAI2020会议中关于推荐系统的论文，同时通过代码分析了下所接收论文的标题，发现了一些研究的热点以及趋势。
本文整理自美团技术沙龙第80期《美团内容智能分发的算法实践》，分享内容主要包括三部分。第一部分介绍了大众点评内容搜索的场景特点以及面临的挑战；第二部分介绍了为应对这些困难和挑战，技术团队在链路各环节上做的实践优化，包括内容消费和搜索满意度的优化等等；第三部分是总结和对未来的展望。希望能对大家有所帮助或启发。
| 导语 根据实际项目经验，从零开始介绍推荐的基础知识与整体框架。希望能帮助大家在了解部分碎片化知识后，形成对推荐系统全貌的认知。 本文作者：yijiapan，腾讯WXG数据科学 一、推荐算法的理解如果说互联网的目标就是连接一切，那么推荐系统的作用就是建立更加有效率的连接，节约大量用户与内容和服务连接的时间和成本。如果把推荐系统简单拆开来看，推荐系统主要是由数据、算法、架构三个方面组成。 数据提供了信息。数据储存了信息，包括用户与内容的属性，用户的行为偏好例如对新闻的点击、玩过的英雄、购买的物品等等。这些数
《Session-based recommendations with recurrent neural networks》首次提出将RNN方法应用于Session-based Recommendation。文章中提到当前主流的基于因子分解的模型或者基于邻域的模型很难对整个Session建模，得益于序列化建模算法的发展，使得基于Session的推荐模型成为可能，针对具体的任务，文章中设计了模型的训练以及ranking loss。
话接上文的召回多样性优化，多路索引的召回方案可以提供更多的潜在候选内容。但候选越多，如何对这些内容进行筛选和排序就变得更加重要。这一章我们唠唠召回的信息密度和质量。同样参考经典搜索和推荐框架，这一章对应排序+重排环节，考虑排序中粗排和精排的区分主要是针对低延时的工程优化，这里不再进一步区分，统一算作排序模块。让我们先对比下重排和排序模块在经典框架和RAG中的异同
第29届SIGKDD会议将于2023年8月6日至10日在美国加州长滩举行。据统计，今年共有1416篇有效投稿，其中313篇论文被接收，接收率为22.10%，相比KDD2022的接收率14.98%有所上升。其中，涉及到的推荐系统相关的论文共35篇（本次只整理了Research Track相关论文，应用专题下次进行专门报道）。整理不易，欢迎小手点个在看/分享。
“ 本文首先介绍排序学习的三种主要类别，然后详细介绍推荐领域最常用的两种高层排序学习算法框架：BPR和LambdaMART。因为排序学习的算法和实践大都来源于信息检索，一些理论也必须从信息检索的领域说起，所以本文也会涉及一些的信息检索、搜索方面的理论知识，但重点依然会放在推荐领域排序学习的应用思路。”
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
