大数据之数据治理

文章目录

  1. 1. 数据集成平台:
  2. 2. 数据管理平台:
  3. 3. 数据运维平台:
  4. 4. 数据运营平台:

数据集成平台:

  1. 组成:数据汇集、数据集成、数据安全守护、离线调度、数据共享
  2. 特点:
  • 多样化汇集方式
  • 结构化半结构化非结构化数据汇集与集成
  • 高数据汇集实时性
  • 多样的集成算法
  • 高效的全流程监控的调度
  • 多样的数据实时非实时共享方式

数据管理平台:

  1. 组成:元数据管理、数据建模、主数据管理、数据标准、数据标签、数据安全审计、数据质量评估
  2. 特点:
  • 多源异构管理数据源
  • 高效全面读取元数据
  • 元数据变更管理
  • 全面真实的元数据全链
  • 异构数据源数据模型转换
  • 权威可行的数据标准(本地、国标、行标)管理与应用
  • 业务贴合紧密的数据标签体系
  • 元数据设定安全规则管控与授权,保障数据的安全访问和更新
  • 源数据及数仓数据的全链校验,识别源头问题和数据集成期问题

数据运维平台:

  1. 组成:安装部署、日常巡检、软硬件及业务监控、主被动告警通知、动态伸缩集群、日志审计
  2. 特点:
  • 监控指标丰富可插拔
  • 业务解耦,保持独立性
  • WebSSH

数据运营平台:

  1. 组成:统一认证中心. 组织机构管理、用户帐户管理、角色授权管理
  2. 特点:
  • 标准接口开放与对接,如oauth2
  • 高效稳定的数据接口
  • 灵活可扩展

观点仅代表自己,期待你的留言。