王玉玲
(西安航空职业技术学院 航空管理工程学院, 陕西 西安 710089)
近年来,随着网络和电子商务不断发展,电子商务逐渐步入大数据时代,电子商务大数据化为人们工作和生活提供便利,电子商务数据量增加为计算机研究学者带来极大挑战[1]。电子商务大数据是指针对不同需求者通过不同数据挖掘方法为客户提供需要信息,大数据背景的电子商务具有商品种类繁多,商品数据质量参差不齐以及异构性和多源性特点[2],不同电子商务平台对相同商品定义并不相同,导致电子商务大数据平台中商品应用和分析受到影响。
大数据背景的电子商务商品实体识别是电子商务数据不断发展而出现的重要研究课题[3],通过大数据背景的电子商务平台识别所需商品实体,为大数据分析与集成提供基础。研究大数据背景的电子商务商品实体识别算法,将电子商务商品实体识别算法应用于Hadoop云计算平台中,Hadoop云计算平台可有效应用于海量大数据处理中,该算法可有效识别大数据背景的电子商务商品实体。
Hadoop平台是可对电子商务商品实体大数据实施分布式处理的基础架构平台。Hadoop平台主要部分是Hadoop分布式文件系统,通过分布式文件系统存储Hadoop集群内全部节点文件[4]。Hadoop平台通过特定节点建立,主要包括可控制外部客户机访问与负责管理文件系统名称的姓名节点,可回应分布式文件系统客户机读写记录并存储将文件分成不同数量块的多个数据节点[5],Hadoop分布式文件系统位于Hadoop平台最底层。……