大数据时代的数据治理
清晰直观、操作便捷
? 能在一个界面全面了解到元数据信 息
? 通过图像从更多维度、更直观地了 解企业数据全貌和数据关系
? 通过H5等流行的展现技术实现各 浏览器的兼容
? 支持界面的移植
关注用户诉求、结合使 用场景
? 对业务人员:通过元数据管理的业务需 求管理,能更容易地和技术人员沟通, 便于需求的技术落地
集成平台
数据资产管理 数据治理平台 自助服务平台
···
大数据治理工具---元数据管理工 具
全面的数据管理能力
? 元数据管理范畴:传统数据、大数 据、工具、模板
? 对资产信息的自动获取:自动数据 信息采集、自动服务信息采集与自 动业务信息采集
? 支持一系列的采集器,并且多采用 直连的方式来采集相关信息。
全局的数据资产监控 数据问题跟踪能力
大数据治理产品
亿信华辰 -睿治普元 - 数据众包平台化、可视化、智能化
睿治是一款覆盖数据全生命周期的 数据治理平台,它通过对数据从创 建到消亡全过程的监控和治理,实 现数据的统一管理,保证了业务数 据在采集、集中、转换、存储、应 用整个过程中的完整性、准确性、 一致性和时效性。
数据共享 发布
找到数据 提供数据 使用数据 治理数据 数据运维
自助化 自动化 规范化 可视化 智能化
业务元数据与技术元数据 对接; 自助化数据申请和订阅。 基于数据目录的数据服务 开发; 在线编辑数据模型,生成 作业。
数据服务标准应用方式; 数据通道提供平台支撑。
基于数据地图形成全链路 监控; 事前、事中、事后的数据 质量检查。
全配置、自部署、零干预;动态缺 失数据探查
多维接入,自动化血缘与影响力分 析
数据团队
一站式的数据众包服务,可根据特 定领域、特定场景的客户需求,提 供定制化的数据获取与加工方案的 设计与执行服务, 为客户交付标 准化结构化的可用数据,数据类型 涵盖文本、图像、音频、视频、网 页等。
数据质量 探查和提 升技术
通过合理的技术找出数据问题并找到问题数据;从各个维度监 控数据问题,并能通过最直观和快捷的方式反馈给相关责任人; 实现问题发现、认责、处理、归档等数据问题的闭环解决流程 等
自助化数据服务构 建技术
人工智能的知识图谱构建
大数据治理工具
1
单个工具
元数据 数据质量
主数据
···
2
? 对开发人员:通过元数据管理能管控系 统的开发上线、提升开发规范性,自动 生成上线脚本,降低开发工作难度和出 错几率
? 对运维人员:通过元数据管理能让日常 巡检、版本维护等工作变得简单可控, 辅助日常问题分析查找,简化运维工作。
大数据治理工具---自助化数据服 务平台
数据获取
数据准备
数据服务 开发
数据不 可知
数据不 可控
数据不 可取
数据不 可联
用大数据治理连接大数据与业务创新
0 大数据治0 理阶段 0
1
2
3
摸家底
建体系
促应用
全面梳理企业信 息
自动构建数据资 产库
建立数据标准 提升数据质量
形成企业知识图 谱
为全企业提供数 据价值
数据资产的 自动化采集、 存储
解决各类元数据的采集;实现统一稳定的元数据存储;完成 关系的获取和建立
新一代数据平 台
数
据 平
难以基于海 量数据进行
业务创新
台
大数据处理
发 展Βιβλιοθήκη 数据使用者跨平台数 据传输困
情
无法理解数
难
况
据模型
数据难以
数据之 间没有 统一标
准
快速集成 和共享
Hadoop项目 诞生
大数据 计算
数据质
量问题
“数据仓库” 数据集市 第一个 概念提出
堪忧
DW
传统数据仓库
兴起
时
19 19 19 19 19 20 20 20 20 20 20 20 间