文章插图
2.业务数据采集过程:
业务数据采集过程是从业务系统到ODS的过程 , 首先定义应用系统:
文章插图
然后定义数据库要与应用系统相关联:
文章插图
之后就可以进行ODS数据定义了 , ODS数据的来源方式为:源库读取(一般是MDM基础数据平台的主数据表) , 流程同步 , 接口推送 。
1.源库读取:把业务系统变成从库 , 直接会通过业务系统同步到数仓中 。
2.接口同步:接口同步是业务系统调用此接口进行数据同步 。
3.流程同步:流程同步是与ESB结合生成调度流程进行数据同步 。
通过3种方式进行ODS数据定义后就可以创建集成流程进行数据同步 , 如下图:
我们可以选择自己创建的数据进行创建流程进行同步 。
文章插图
点击flash后 , 会生成调度资源 , 我们就可以进行调度的执行 , 调度资源的明细信息如下图:
文章插图
3.效果展现
1.主数据同步
文章插图
2.DAP数据同步
文章插图
数据互通企业内部各个系统间进行集成 , 对数据进行治理 , 实现数据的同步和分发 , 实现信息共享 , 同时进行企业内部与外部、线上与线下数据的集成 , 打通业务边界 , 实现生态化 。
1.功能介绍
通过主数据管理进行企业内部统一数据标准 , 为主数据标准化提供一个统一的集中式管理平台 , 为所有信息交互和数据交换集成提供统一的编码数据 。在主数据治理的过程中 , 企业服务总线作为辅助工具 , 完成数据的同步与分发 。
2.功能使用
基础数据数据分发:
基础数据分发首页通过应用配置分发主数据和字段:
文章插图
配置分发字段:
文章插图
通过配置分发权限 , 配置主数据分组能够分发那些业务系统 。
文章插图
调用分发API接口调用统一分发:
文章插图
通过BPM流程打通各个业务系统:
文章插图
3.效果展现
执行上述流程后可以通过数据中台调用该数据 。如下图:
文章插图
数据治理为了凸显数据中台的价值 , 需对数据中台的数据进行综合治理 , 构建标准化、流程化、规范化、一体化的数据治理体系 , 有效的数据治理可以确保企业数据全面、一致、可信 , 从而全面提升数据中台数据资产的价值 。
1.功能介绍
数据治理分为基础数据治理和业务数据治理 , 基础数据治理是通过MDM基础数据管理平台进行数据的清洗、管理、审批等操作 , 帮助实现基础数据的一致性、完整性、准确性 。
业务数据治理主要是从ODS到数仓(维度表、基础事实)过程中进行质量检测 , 帮助业务数据的完整性 , 这样在进行汇总计算的时候才能帮助数据准确性 , 从而建立数仓模型 。
2.功能使用
基础数据治理:
数据清洗:通过数据清洗功能把业务系统的基础数据导入到MDM中进行校验清洗 , 清洗后在导入到主数据真实表中 。
文章插图
业务数据治理:
配置校验规则:配置正则表达式校验规则 。
文章插图
维度表字段配置关联校验规则:
- 分享3个如何做数据分析的要点 做数据分析怎么做
- 林奕晨和秀云是那部电视剧里的人物
- 林心如和林志颖演过的电影是什么
- okr和kpi的区别 okr是什么意思啊
- 新买的wifi路由器怎么安装 路由器怎么安装和设置
- 毫升和升的换算 毫升和立方厘米的换算
- 铈怎么读拼音 铈怎么读拼音和组词
- 奔驰车怎么启动和熄火
- 东风雪铁龙c5和速派的区别是什么
- 蒙牛低脂高钙和伊利低脂高钙的区别 高钙低脂蒙牛还是伊利好