信息检索中的排序问题概述

2021-09-10 18:13:33胜紫菡
商业2.0-市场与监管 2021年8期
关键词:信息检索机器学习

胜紫菡

摘要:近年来,信息检索中的排序学习受到越来越广泛的关注.本文将在机器学习的框架下介绍排序学习,基于机器学习方法的排序算法称为“学习排序法”.学习排序法的两个主要特点是:一是基于特征的特点:训练文本是用特征向量来表示的;二是判别训练:“学习排序法”有自己的输入空间,输出空间,假设空间和损失函数.本文将针对不同的学习算法详细阐述这四个主要成分。

关键词:机器学习;排序问题;信息检索

排序学习是典型的有监督学习,训练集是由查询,与查询相关的文档和相应的相关性判断标准组成.排序模型可以通过一个排序算法来预测训练集的真实标签.当给定一个新的查询时,就可以根据排序模型对文档进行排序.不同的排序算法定义不同的输入空间和输出空间,并且使用不同的假设空间和不同的损失函数.因此在机器学习框架下,我们将“排序学习”分为以下两类:

基于单个文档的排序方法(Pointwise approach)

基于配对文档的排序方法(Pairwise approach)

1.基于单个文档的排序方法

基于单个文档的排序方法是排序学习最早提出的算法,其基本思想是将训练集中的每个查询/文档对作为训练数据,再应用合适的算法来学习一个排序模型.因为每个查询/文档对都被看做一个单独训练样本,所以称这种方法为Pointwise方法.Pointwise方法的四个主要组成成分:

(1)输入空间:包含单个查询/文档对的特征向量

(2)输出空间:包含单个查询/文档对的相关度得分

登录APP查看全文

猜你喜欢
信息检索机器学习
基于同态加密支持模糊查询的高效隐私信息检索协议
基于词典与机器学习的中文微博情感分析
基于网络搜索数据的平遥旅游客流量预测分析
时代金融(2016年27期)2016-11-25 17:51:36
前缀字母为特征在维吾尔语文本情感分类中的研究
科教导刊(2016年26期)2016-11-15 20:19:33
基于支持向量机的金融数据分析研究
医学期刊编辑中文献信息检索的应用
新闻传播(2016年18期)2016-07-19 10:12:06
在网络环境下高职院校开设信息检索课的必要性研究
新闻传播(2016年11期)2016-07-10 12:04:01
基于神经网络的个性化信息检索模型研究
教学型大学《信息检索》公选课的设计与实施
河南科技(2014年11期)2014-02-27 14:10:19
公共图书馆信息检索服务的实践探索——以上海浦东图书馆为例
图书馆界(2013年5期)2013-03-11 18:50:29