基于领域文法的微博舆情分析方法及其应用

张露晨　张　良　孙昊良　方　芳　曹　阳　曹存根

1(国家计算机网络应急技术处理协调中心　北京 100029)2(中国科学院计算技术研究所智能信息处理重点实验室　北京 100190)3(广西师范大学计算机科学与信息工程学院　广西 桂林 541000)



基于领域文法的微博舆情分析方法及其应用

张露晨1张良1孙昊良1方芳2曹阳3曹存根2

1(国家计算机网络应急技术处理协调中心北京 100029)2(中国科学院计算技术研究所智能信息处理重点实验室北京 100190)3(广西师范大学计算机科学与信息工程学院广西 桂林 541000)

传统的舆情分析方法存在两个缺陷：由于缺少对舆情文本必要的语义处理，传统的基于关键词或热词的网络舆情分析方法往往分析结果不准确，即漏判率和假阳性比较高；在舆情发展初期，由于数据稀疏，一般不能及时发现舆情“苗头”。针对这些问题，提出一种基于领域文法的分析方法对微博文法进行分析，并给出一套通用的领域文法的设计原则以及分析方法。基于领域文法的方法与统计方法相比主要的优点和创新点包括:领域文法可以在数据稀疏的情况下依然可以很好的工作；领域文法的方式不需要对信息进行统计，不会受到距离的影响；领域文法的方法可以很好地提取真正有用的信息而不会像统计方法易受到词搭配的影响。为论证该方法，选择贪腐类舆情作为一个验证应用。实验表明，贪腐舆情文法很好地对贪腐类微博舆情文本内容进行识别和提取，从而达到贪腐舆情监控的目的。……