基于问答交互的答案句选择算法

2021-01-27 03:42:10侯佳正张绍阳
计算机与现代化 2021年1期
关键词:机制特征模型

侯佳正,张绍阳,鱼 昆

(长安大学信息工程学院,陕西 西安 710064)

0 引 言

答案选择任务是自然语言处理中句子匹配任务(NLSM)的一个子任务,用来评估问题-答案对之间的相关性,最终输出问答对的匹配得分,是完成问答系统[1-2]、文本处理等任务的基础。问答系统的答案处理模块需要确定问题与答案之间的相关性,根据相关性得分对答案句进行排序,最终向用户返回相关性最高的一个或几个答案;文本处理任务中需要根据问题句、主题句去剔除文本中与问题、主题无关的句子。其精度直接影响整个系统的好坏,所以提高答案选择任务的准确率具有十分重要的意义。

传统答案选择算法利用词法、句法等一些特征来计算问答对的匹配程度。Yih等人[3]利用单词匹配、WordNet和词汇之间的相似度、命名实体匹配等丰富的词汇级别的语义特征进行答案句的选择。Barron-Cedeno等人[4]使用自然语言处理工具包提取问答对的命名实体匹配、关键词匹配、单词长度等特征,然后将这些特征输入SVM进行分类,从而实现答案的选择。Yao等人[5]利用依存句法分析,构建问题与候选答案句的语法分析树,最后使用逻辑回归模型判断问题和答案之间的依存关系。基于特征匹配的答案选择算法,特征固定,可移植性差,并且只聚焦于句子的浅层特征,没有关注句子的整体语义信息。

随着深度学习在自然语言处理领域的发展,有很多学者将目光开始投向于深度学习算法,提出了基于Siamese结构[6]的网络,在该结构中,相同的神经网络编码器(CNN或RNN)被应用在问答对上,将问句和答句编码到相同嵌入空间的句子矢量中,然后仅根据这2个句子向量进行相关性的判断。……

登录APP查看全文

猜你喜欢
机制特征模型
一半模型
重尾非线性自回归模型自加权M-估计的渐近分布
如何表达“特征”
不忠诚的四个特征
当代陕西(2019年10期)2019-06-03 10:12:04
自制力是一种很好的筛选机制
文苑(2018年21期)2018-11-09 01:23:06
3D打印中的模型分割与打包
破除旧机制要分步推进
中国卫生(2015年9期)2015-11-10 03:11:12
注重机制的相互配合
中国卫生(2014年3期)2014-11-12 13:18:12
打基础 抓机制 显成效
中国火炬(2014年4期)2014-07-24 14:22:19
线性代数的应用特征
河南科技(2014年23期)2014-02-27 14:19:15