明略观点:关于公安数据中台 读这一篇就够了
中国智能化安防协会 发布时间:2023-06-22 浏览:
近日在第二届中国警务信息化建设成果推介活动中,经过公安客户、技术专家和行业媒体的多轮筛选,明略科技的智慧公安数据中台荣获“优越大数据解决方案奖”。
2019年很可能成为“数据中台”元年,各行各业都在讨论的数据中台到底是什么?为什么要建立中台?备受业内承认的明略智慧公安数据中台的价值几何?此篇文章将为您一一揭晓。
什么是数据中台?
“如果需要对某个信息进行深度挖掘,但在系统中无法查询,需要用另一个系统去查,数据在各系统之间无法共享,导致效率低下。各系统之间还会有功能和数据的冲突,服务和应用的冲突。”
为解决这些问题,就需要整合挖掘数据,打造数据中台,渐渐让各个体系融合在一起,建立统一的体系,就算再扩展业务也是纳入这个中台,用相同的技术和模式进行运营。由此看出,数据中台的内核包括两方面:一个是应用数据的技术能力,另一个是数据资产的管理。
本质上,数据中台是基于方法论而实现的效率工具,行业数据中台,则是“效率工具+行业知识+方法论+优越实践“的整合;是业务驱动的数据管理变革,是实现数据智能的有效路径。
公安行业为什么要建立数据中台?公安大数据发展主要问题:缺乏开放和融合
自2018年全国公安厅局长会议后,各地公安机关纷纷推进公安大数据战略。要达到公安大数据建设中提到的“提升智能化水平、释放警力、提有效能”,就必需要开放、融合。坚持集约化建设原则,打破部门警种壁垒,打通交换共享渠道,集聚优异资源,实现数据规模效益和价值*大化。但从目前情况看,“开放和融合”或成为公安大数据建设面临的*大问题:
数据共享渠道壁垒未打通,数据深度共享层面尚未形成:安全域数据汇聚共享难,数据共享渠道不通畅,外部数据汇聚不通畅,评价体制尚未形成;
数据治理弱,应用智能化水平不高:大数据应用标准体系没有建立,数据应用仍停留在传统应用层面,数据智能应用体系仍处于起步阶段,数据有效推送体系尚未建立;
体系不统一,数据应用能力不强:平台技术架构互通互操作性差,数据应用支撑能力不强,数据应用发展不均衡。
目前公安体系正在努力推进新一代公安网的建设,将从根源上解决公安大数据发展过程中的主要问题,这也为国内数据中台类的产品提供了广阔的应用场景。
公安数据中台核心价值:确保数据一致性和重用性,让数据真正产生价值
数据中台*核心的是数据管理体系,包括全局数据仓库规划、数据规范定义、数据建模研发、数据连接萃取、数据运维监控、数据资产管理工具等。
公安行业构建数据中台,将能确保数据一致性和数据重用性。统一数据基础模型将业务领域的数据实现互通,避免了数据重复加工、维护带来的数据孤岛效应和成本浪费。
从技术角度讲,数据中台是增加系统的灵活性,通过整合数据、产品和技术,形成强大的共享服务层,支持前台各部门的业务发展。
从应用角度讲,数据中台是以业务视角呈现系统,让数据真正产生价值,根据不同时期业务的需求和特点,能更快产生为业务服务的时效性应用。
获得优越大数据解决方案奖的“明略公安数据中台“:多年技术与业务融合实践的再升级
明略智慧公安数据中台成功实现了对多源、海量、异构数据的实时和离线接入,打破数据孤岛;解决数据标准化和管理问题,提升数据质量,管控数据资产,增益数据效能;数据深度加工,融合关联全量异构数据形成知识图谱,挖掘沉淀数据知识,为智能化分析及应用提供数据支撑;面向全警提供大数据资源服务,实现大数据成果慧警。
在明略看来,公安数据中台包括四部分:
数据接入和融合:在分层解耦的前提下,对公安网络大数据平台和信息资源服务平台数据资源,以及其他公安外部社会数据进行接入和融合,实现数据资源的集中汇聚;
数据关联和统一:将数据中心,技术,数据库等的海量数据信息采集,计算,加工,对数据的标准和质量进行统一;
数据资产积累:所有数据被整理后会形成行业特有的数据标准,再进行深入的挖掘,产出业务逻辑,算法模型和抽象统一,*后储存起来,生成原始库、资源库、主题库、知识库等大数据资产,为业务服务;
数据服务:基于前三步的准备,开始定义服务中心和服务,提供数据资产管理目录,根据实际需求提供实际业务。
因为公安数据的数据类型复杂,有上百种实体(人、案、物、地、组织等)、数十大类关系、成千上万的事件类型,这给构建公安数据中台带来了巨大的困难。凭借多年与公安数据打交道的经验,明略摸索出了一套基于知识图谱的大型语义化网络、对数据进行治理和知识构建的数据中台构建之道。
基于“三个统一”原则的数据治理,完成公安数据中台的艰难两步走
秉承以下“三个统一”原则的数据治理服务,明略完成了数据关联和统一、数据资产积累的艰难两步走:
◆统一数据标准,数据规范定义、数据模型设计、数据开发规范;
◆统一实体,实体的属性、关系、事件充分融合打通,让数据融通而非以数据孤岛的形式存在;
◆统一数据服务,实现数据复用,弹性可变换的模型构建,灵活支撑上层业务。
在这个过程中,明略拥有着高度产品化的工具依仗。明略自主研发的数据治理工具CONA,是行业内*款支持结构化与非结构化数据的自动化治理工具,能够大规模、自动化地采集、清洗、归类和关联所有数据,形成统一数据视图,大大提高行业知识图谱构建效率。CONA集数据接入、数据清洗、数据融合、数据标准化、数据监控和数据管理于一体,实现AI驱动的数据治理。