►顶部微信名片可直接添加市场总监商务咨询、方案沟通即时响应►点击链接了解更新详情演示体验、社群咨询、商务采购https://docs.qq.com/doc/DVHlkSEtvVXVCdEFo日常中是否有这样的烦恼数据分散在各个业务系统找数难、口径乱、数据质量不可控敏感数据安全难以精细化管控。业务场景财务、生产、业务多套系统各自独立业务人员需要一份经营汇总报表来回对接多个IT人员。 好不容易拿到数据却发现相同指标两边数值不一致想要核查问题不知道数据从哪流转而来。 同时原始明细里包含手机号、身份证等敏感字段要么全部开放存在泄露风险要么完全锁死业务无法查看。AllData数据中台分 2 篇文章解析数据治理平台 7 大功能现在先看数据资产平台、数据质量平台、元数据管理平台三大核心模块带您看清如何解决数据治理各类老旧问题注数据模型管理Data-Model、数据门户管理Data-Portal、数据标准管理Data-Standard和数据权限管理Data-Secure在 数据治理平台(二) 中介绍一、数据资产平台 (OpenDataWorks)企业数据资产运营平台基于元数据实现资产盘点、价值评估、资产服务化释放数据资产业务价值。OpenDataWorks项目地址https://github.com/mikevan666/opendataworksOpenDataWorks文档地址https://github.com/mikevan666/opendataworks/blob/main/docs/guide/start/quick-start.md1、资产全生命周期管理完成全域数据资产盘点对资产做打标、价值评估、生命周期管理。✅️ 自动盘点库表、文件、接口等各类数据资产统计资产数量、访问热度✅️ 支持业务标签、管理标签区分核心资产、废弃资产辅助资产治理决策。数据资产页面资产大盘总览统计资产规模、访问热度与任务状态数据仓库页面支持SQL语句查询数据表右边显示数据表的血缘流向数据仓库页面可切换成数据视图进行查看2、核心功能 资产与血缘管理重点指定能力依托元数据血缘将血缘能力融入资产视图支撑资产影响分析。✅️ 在资产详情页可查看表 / 字段上下游血缘链路直观展示资产加工来源✅️ 支持资产变更影响分析评估修改、下线数据表会影响哪些下游业务、报表。数据血缘页面可视化全链路血缘图谱追溯数据加工流转关系数据建模页面维护业务域、数据域实现数仓分层资产管理二、数据质量平台 (Datavines)数据质量平台内置百余种质检规则的自动化数据体检平台实现数据问题发现、作业调度、告警、问题跟踪的质量闭环。Datavines项目地址https://github.com/datavane/datavinesDatavines文档地址https://datavane.github.io/datavines-website/1、核心功能点 数仓质量分析重点指定能力面向数仓表/字段构建质量作业支持丰富规则、定时调度完成全维度质量检测。✅️ 内置完整性、唯一性、正则、阈值、跨表比对等上百种开箱即用质检规则支持自定义SQL规则✅️ 支持定时调度质量作业支持单表质检、跨数据源数据比对输出质量大盘概览、表级/字段级质量统计。数据质量分析-质量大盘页面全局监控质检作业运行状态直观展示数据质量概况数据质量分析-数据目录页面浏览接入的库表资产辅助配置数据质量规则数据质量分析-作业管理页面管理质检作业配置字段完整性、格式等校验规则数据质量分析-作业编辑页面设置质检规则、调度周期创建自动化质量检查任务2、核心功能 报告预警能力重点指定能力SLA告警策略联动质检作业异常多渠道通知完整留存执行报告。✅️ 可配置SLA告警规则异常通过钉钉、邮件、企业微信多渠道秒级推送责任人✅️ 完整保存每次作业执行记录、检查明细报告识别错误数据可进入错误数据管理做闭环跟踪治理。数据质量分析-作业编辑页面设置作业SLA告警配置告警管理-SLA页面配置 SLA 告警策略实现数据质量异常消息通知错误数据存储管理页面管理问题数据存储对质检识别错误数据进行闭环处理三、元数据管理平台 (OpenMetaData)全域元数据采集、解析、管理底座统一接管各类数据源元数据为数据目录、血缘、数据治理提供元数据基础支撑。OpenMetaData项目地址https://github.com/open-metadata/OpenMetadataOpenMetaData文档地址https://docs.open-metadata.org/latest1、核心功能 数据分级分类重点指定能力对数据表、字段资产打安全与业务分级标签完成敏感资产识别归类。✅️ 支持自定义分级分类体系自动/手动为表、字段打上密级、业务域标签✅️ 分级分类结果输出给权限、数据门户支撑数据权限管控、敏感资产检索。数据探索页面浏览元数据资产查看数据表、字段基础数据探索-详细页面查看元数据详细信息数据域页面按业务域划分数据资产实现资产权责划分数据域-子域详细页面数据域-数据产品页面2、核心功能 数据目录与血缘管理重点指定能力采集解析全链路元数据自动解析血缘构建元数据驱动的数据资产目录。✅️ 自动采集多源数据库、数仓的库、表、字段、变更元数据统一存储✅️ 自动解析ETL、SQL加工逻辑构建字段级血缘关系为上层门户、质量平台提供血缘能力。数据探索-血缘关系查看页面血缘关系页面可视化展示数据表上下游链路支持溯源与影响分析设置-元数据拾取页面支持多种数据源一键添加元数据7大功能核心定位与场景选型一1、数据资产平台 (OpenDataWorks)核心定位数据资产的总入口完成资产盘点、资产生命周期管理承载数据开发、数仓建模、任务调度对外输出资产视图与资产价值评估。适合的场景需要做资产盘点、数仓建设、数据开发流水线需要统计资产健康度、资产热度、下线废弃资产的项目。2、数据质量平台Datavines核心定位数据质量的校验管控中心配置各类质检规则、跨源数据比对、SLA 告警识别脏数据保障入库与加工后数据可信。适合的场景对数据准确性、完整性有强要求需要自动巡检、异常告警、留存错误数据金融 / 政务 / 生产类核心数据场景必选。3、元数据管理平台OpenMetaData核心定位底层元数据采集引擎自动采集库/表/字段信息解析字段级数据血缘为资产、门户、质量模块提供元数据、血缘底层能力。适合的场景几乎所有治理项目建议启用是数据目录、血缘分析的底层底座上层多个模块依赖它。