基于启汀开发框架云端平台,构建海量数据查询分析服务集群,既可以处理结构化的数据,也可以处理非结构化、半结构化的数据,满足配置、日志、网页、音视频、社交网络等多源异构数据的加载和存储,提供数据查询、全文检索、数据离线批处理分析、交互式分析、图分析、数据挖掘、机器学习等多种数据处理模式。同时,基于平台提供的实时流处理集群,可以满足实时数据研判分析服务的需求。对于计算资源与存储资源以及数据访问资源进行统一控制管理,对于计算资源进行高效的调度管理与使用控制;对于存储资源进行配额管理;对于数据访问权限,进行严格的权限管理。
1.数据中台建设总体框架
数据中台是一套可持续“让企业数据用起来”的机制,是一套解决方案,不仅是一个平台。让数据更加灵活地支撑前端业务,通过持续沉淀企业数据复用能力形成数据从采集、治理、开发到数据服务的一整套数据使用的机制。
2.“咨询+平台+实施”三位一体中台建设方案
(1)咨询服务:顶层设计,确定数据战略和数据规划,绘制蓝图,指导中台建设实施。
(2)软件平台:中台战略的承接载体,实施工作的支撑工具
(3)实施服务数据中台落地的关键保障。
3.数据中台总体规划
数据中台规划的核心内容是确定企业的数据战略,以及为达成战略目标所需要的组织保障(组织、流程制度)、数据保障(数据架构、数据安全、数据标准、数据仓库、数据质量、数据服务)和技术平台保障.
4.数据架构与数据标准
(1)以企业业务架构和应用架构为输入,规划设计企业数据架构,主要内容包括数据主题域和主题划分,数据实体识别和企业级数据模型设计,数据流向梳理和数据分布地图绘制。
(2)以数据安全管理组织、流程和制度为基础保障,分析企业在数据全生命周期的不同阶段的安全需求,设定相应的管控策略,确保企业数据安全管理目标
(3)数据服务的需求来源包括业务协同和流转需要、数据分析应用(业务分析和优化)需要两个方面。基于服务需求,制定相应的服务规范和服务管理制度
(4)显性化、全方位、多维度展现企业数据资产积累、分布和运营管理情况,包括资产大盘、元数据数据标准、数据管理、数据质量、数据交换、数据安全等维度的监控与统计分析
4.数据挖掘分析
(1)数据分析应用模块
(2)服务与实施实例
5.数据中台系统小结
(1)中台赋予业务快速创新和试错能力,企业可以聚焦核心共享服务的建设,提高服务的重用
(2)打造数字化运营能力,中台有助于业务通过共享核心能力的沉淀,进行数字化运营。通过对中心核心数据的分析,更加精确地对业务进行调整和优化,全方位动态调整资源利用。
(3)改变组织阵型带来组织效能提升,中台的变化也是组织阵型的变化。一方面,对于公司,中台侧重的是跨部门跨团队的深入合作。另一方面,对于个人,中台推荐的是类微服务的小而精团队,员工从事多种岗位,对全局和整体有更深入的锻炼。