关键词:
公安信息资源
清洗整合
共享服务
Java技术
大数据技术
摘要:
近年来,公安信息化建设和信息资源汇集越来越向省部级公安机关集中,地市公安处于承上启下的位置,既要满足省部级对数据的采集和汇总要求,还要满足基层单位的实战需求,同时要满足各业务警种对大数据的应用需求。本文从地市公安信息资源现状、软硬件现状及公安信息化需求出发,设计实现一套信息资源服务平台软件,旨在解决地市公安在数据资源的汇集、清洗、整合、共享、服务等方面存在的问题与不足,提升地市公安对信息资源的处理和利用效率,以及应用和服务水平,进一步推进公安科技信息化的进程。本文针对当前公安部门从各种途径获取的海量数据,需要实现快速存储和检索,而关系型数据库无法满足要求的现状,设计采用大数据处理技术,提出在数据接入入库前进行数据清洗去重,减少不必要的存储,实现对入库的TB级数据,甚至PB级数据的快速、准确检索。针对A市特殊的地理位置,提出以轨迹应用为切入点的人、车管理和服务思路,重点对卡口、车站、码头进行监控,把牢出入口。针对业务协同和共享服务不足的问题,设计提供各种信息资源服务功能,既能通过Web直接访问,也能通过底层webService接口提供查询、比对、数据共享等服务。本文采用主流Web开发技术Java,通过UML进行建模设计,运用分布式内存计算引擎Spark实现关键信息内存运算,采用近实时分布式全文检索引擎ES实现结构化、半结构化和非结构化数据的全文检索。本文通过需求分析,明确了平台建设的主要功能和技术指标,包括大数据中心建设、清洗整合、综合检索、分析研判、服务接口、资源目录、统计分析等功能,以及性能指标、扩展性需求等。通过总体设计,对平台总体架构、网络架构、功能模块、业务流程、数据库进行了初步设计。通过详细设计,对各个功能模块进行界面设计、流程设计、代码设计,并开发实现了各个功能。最后对系统进行功能和性能方面的测试,测试结果满足设计指标要求。本文设计实现了一套市级公安机关信息资源服务平台,通过该平台,建立了完整的数据资源汇集流程和数据清洗整合规范,形成了标准的信息共享与服务机制。平台充分发挥信息资源的作用,将信息资源转化为各类服务,以服务的方式为上级单位、本级各业务警种、基层单位提供信息化支撑,满足A市公安民警对当前海量数据资源的应用和实战需求,提升了公安部门的科技信息化水平,同时也为其他地市公安信息资源服务平台建设提供一定的借鉴和参考。