基于自然语言Python的长文本比较研究

姜安印　冯龙飞

摘 要：文本比较作为人工智能的重要应用，在语言分析、比较研究乃至学术诚信等方面有着广泛应用。文章以中国古代具有重要经济学价值的《管子》和西方古典主义经济学重要著作《国富论》作为比较范本，借助Python语言及相关模块，以较高的效率和精度实现了长文本比较。研究发现，通过人工智能自然语言处理语言及技术，能实现对经济学长文本比较研究，这一方法在未来还可以探索应用到其它社会科学领域。

关键词：人工智能；自然语言处理；文本比较；Python；国富论；管子

中图分类号：TP18；F01 文献标识码：A DOI：10.11968/tsyqb.1003-6938.2018026

Research of Co-term Analysis of Long Text Comparison based on Python

——Case Study of the Economic Thoughts in Wealth of the Nations and Guanzi

Abstract Text comparison based on information technology becomes a very important tool in nowadays academic research as linguistic analysis， academic thoughts and academic integrity examination. This paper focused on the long text comparison with the approach of Co-term Analysis on Python and used the economic thoughts comparison between Wealth of the Nations and Guan Zi to explore the way to do future thoughts comparison in economic and other social science with better efficiency and accuracy.

Key words artificial intelligence； Natural Language Process（NLP）； text comparison； Python； Wealth of the Nations； Guan Zi

文本比较是指通过对相似范畴和内容的文章或书籍进行对比，研究其文字、观点和思想的异同，从而实现言语特征分析、学术思想比较乃至学术诚信检验等多种目的。随着信息技术和互联网技术的发展，基于计算机的文本比较特别是长文本比较在现代社会科学中有了越来越广泛的应用。在实际应用中，通过借助Python等编程语言，运用jieba分词模块进行文本比较，可以有效的提高信息筛选和对比的效率和精度，相比其他方法具有较大优势。在经济学中，以文本比较为重要手段的经济思想比较是制度经济学和经济史研究的常用方法，特别是东西经济学思想比较在研究制度变迁、社会变化、政策效果等方面具有重要意义。本文试图借助Python语言对《管子》和《国富论》两书进行比较，探讨两书之间的思想异同，同时对如何利用计算机技术进行未来的经济学和其他社会科学思想的比较研究进行了探索。……