公安和情报部门积累了海量的数据库信息,但传统关系型数据库的性能瓶颈限制了数据的价值发挥。数据来源分散滞后、归档能力薄弱、查询和呈现自动化程度低、业务模型应用少等问题亟待解决。

为挖掘海量数据关联关系,筛查重点人员并分析其关系网络,该系统采用HDFS分布式文件系统搭配MySQL数据库,利用Spark分布式计算引擎进行数据分析,结合Web前端技术和EChart数据可视化技术,构建了一个可拓展性强、数据处理速度快、实用性强、操作简单的人员信息管理系统。

该系统为公安和情报部门提供人员信息查询、数据可视化和数据预测功能,可用于公安侦查、治安管理、刑侦立案等工作,并在深圳市某公安部门取得良好应用效果。