1. 技术构造概览
在建设数据中台的过程中,这三种类型的数据均作为数据来源出现,数据中台需具备处理这三种类型数据的能力。
数字中台基于数据资源的多元性质,旨在高效支持业务运作。它结合了设计规划的方法论、原则及思路,统一规划建设数据资源体系的大数据采集感知体系、数据资源融系及信息共享服务体系。将数据安全和数据标准融入这三大体系中,不断提升数据接入、处理、、挖掘及治理服务的能力,从而不断丰富和完善数据中台的功能。
数据中台主要包含多个平台系统,如统一数据采集接入平台、集中数据处理平台、管理平台(重复一次)、全域治理平台、融合共享平台、分析挖掘平台、知识图谱平台、统一管理平台及数据可视化平台等。
2. 层次结构详解
根据对数据资源的需求分析和愿景目标,结合设计规划的指导原则及思路,我们规划了统一的数据资源体系,以建设大数据采集感知体系、数据资源融系及信息共享服务体系。在此过程中,我们重视数据安全和数据标准的融合,持续进化数据的接入、处理、、挖掘及治理服务能力,从而不断完善和丰富数据中台的功能。
此架构图的详细结构如下:
3. 逻辑构造解析
统一数据资源体系的规划建设是整个数据建设的核心。它负责利用底层平台的动态感知采集能力进行海量数据的采集和接入,进行标准化和智能化的处理,精细化的,全维度的融合以及精准可控的共享服务。为实现这些目标,我们规划了三大体系:大数据感知采集体系、数据资源融系及数据共享服务体系。
在系统功能设计上,主要包含五大模块:数据接入模块、数据处理模块、数据模块、数据挖掘与治理模块以及数据共享服务模块。每个模块的具体功能如下:
4. 数据构造详图
针对多源异构的数据场景,数据中台的数据架构旨在提供稳定且高效的支撑服务,包括数据的接入、融合及智能数据应用等。我们综合考虑了数据的接入方式、存储方式、加工方式及使用方式等因素。
资源库是在原始库的基础上进行数据的规范化治理及基于数据主题的整合。主题库则以原始数据和资源数据为基础,构建实体关系模型,并在此基础上形成知识图谱和事理图谱等。业务库则服务于不同业务场景所涉及的相关数据结构。