CCRC-CDO数据治理：数据集成与共享

这是一篇关于CCRC-CDO数据治理：数据集成与共享的思维导图，主要内容包括：数据集成的4种典型应用，数据集成步骤与方法，数据集成架构的演进，应用集成的4个层面。

CCRC-CDO 数据治理：数据集成与共享

• 一、 应用集成的4个层面
  • 门户集成
    • 企业门户
    • 门户集成
      • 单点登录
      • 统一用户管理
      • 统一身份认证
      • 界面集成
      • 待办集成
      • 关键指标集成
      • 内容管理
    • 统一入口、按需推送
  • 服务集成
    • SOA
      • ESB服务总线
    • 微服务
      • API接口
  • 流程集成
    • 跨多个应用系统的自动业务流程
    • 自动与人工协作完成的业务流程
    • 纯人工完成的业务流程
  • 数据集成
    • 在逻辑上或物理上有机地集中
    • 将互相关联的异构数据源集成到一起
    • 目的是维护数据源整体上的数据一致性
• 二、 数据集成架构的演进
  • 3种形式
    • 数据复制
    • 数据联邦
    • 接口集成
  • 点对点
  • EDI集成架构
    • 数据交换平台
  • SOA集成架构
    • ESB企业总线集成
  • 互联网集成架构
• 三、 数据集成的4种典型应用
  • 基于中间件交换共享模式
    • 东方通数据交换平台
    • kafka
  • 主数据应用集成模式
    • 数据同步/异步技术 Oracle OGG、ADG，DSG
    • API 数据接口技术
      • webservice
      • json
      • restful接口
  • 数据仓库应用模式
    • ETL数据同步/异步工具
  • 数据湖应用模式
    • 全部的数据同步/异步技术 能把数据进湖就行
  • 区别
    • 数据仓库
      • 经过清洗后的结构化数据
      • 用于统计、报表、传统BI分析
    • 数据湖
      • 结构化、非结构化
      • 灵活构建、成本低、可复用数据资产
• 四、 数据集成步骤与方法
  • 集成需求分析
    • 需求调用
    • 需求汇总
    • 需求分析
    • 需求确认
  • 制定集成方案
    • 设计数据模型
    • 设计数据库
    • 分析数据源
    • 确定集成模式
  • 接口开发与联调
    • ETL脚本开发
    • 测试
    • 完整性验证
    • 及时性验证
  • 部署运行和评价
    • 部署ETL脚本
    • 整合程度评价
    • 分析能力评价