蔡朝辉
新智认知数据服务有限公司,上海 200433
随着全球信息技术高速发展,信息化已经成为促进经济社会发展的强大动力,人们在社会生活的各个方面每时每刻产生着海量的数据信息。新形势、新任务下,城市公共安全需要充分利用、甚至主动捕获信息社会产生的海量数据,通过整合共享、实时分析和深度挖掘,积极应对日益复杂的城市公共安全和国家反恐维稳形势。与时俱进,城市安全相关数据已经具备典型的大数据特质:
(1) 数据体量(Volume)大,1个警用高清视频监控探头1个月就将占用2.5TB的存储空间,500个探头将轻易突破PB级存储需求,1个交通卡口断面1d生成的数据就能达到1~2万多条,几百路卡口1年将生成数十亿条数据。
(2) 数据类别(Variety)多,公安数据源种类繁多,结构不一,冲破了以往所限定的结构化数据范畴,警务数据的70%~85%的数据都是图片、视频、音频、网页、文本等半结构化和非结构化数据。
(3) 数据价值 (Value) 密度低,在系统存储的海量数据中,真正对于公安部门有用的信息如同沙里淘金,需要通过数据的深度关联分析,挖掘其中价值和潜力。
(4) 数据处理速度 (Velocity) 要求快,时效性高,警务工作对时间相当敏感,战机往往稍纵即逝。因此,在对海量数据进行挖掘分析时,要求尽可能的秒级响应。
显而易见,传统的网络、存储和计算架构已经不能适应城市公共安全对于海量数据快速处理的实战要求,开启公安大数据创新应用,对于解决公安信息化的技术瓶颈问题,推动公安信息化向深度和广度迈进,进一步提升公安机关核心战斗力,有着极其重要的意义。……