暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

元数据驱动的数据治理:方法和原因

原创 eternity 2022-07-20
1638

在之前的讨论中,我们探讨了数据管理员的角色及其在数据治理项目中的重要作用。他们是识别数据质量缺陷并与业务合作伙伴合作以提高数据质量的倡导者。数据管理员是特定数据集、其对组织的价值以及数据的使用方式方面的主题专家。

要最大限度地发挥数据管理员的作用,需要具备存储数据、对数据集进行描述的技术能力,并能够进行规划性测量和监控,以确保符合公司政策和数据使用目标。元数据支持我们的数据治理策略的编程实现。元数据的价值在于能够描述我们的复杂数据集,在集成数据上创建业务层,并识别组织内团队如何使用数据。元数据有多种形式,包括数据的业务描述、关于给定数据集的使用信息、关于数据创建位置的地理信息、第三方数据集的来源,以及数据集质量最低值的描述。
有效利用我们的元数据需要三个行动:

  • 治理:我们的第一步是定义元数据的策略。这包括我们捕获和存储的数据点、负责存储元数据的系统、相关数据集以及经批准的公司数据使用。

  • 发现:一旦我们确定了要管理的元数据类型和访问数据的控件,我们就必须在整个组织中找到它。这通常需要双轨以人为中心的分析和库存过程,以及元数据发现的编程方法。

  • 管理:一旦我们确定了现有元数据并确定了用于创建和存储的未来元数据,我们就可以实施编程流程,使用这些元数据来驱动关键业务流程,以实现数据集成、业务影响测量和更好的数据资产风险管理。

元数据在我们的数据生态系统中开启了各种价值。自动化关键业务流程的能力,用于随着物理世界的发展对未来行为和模型进行建模。这种使用元数据来弥合现实世界和虚拟世界鸿沟的最常见实现是用于供应链、制造业和土木工程的数字孪生兄弟。这种元数据驱动的自动化允许在物理表现和用户改变行为时快速调整流程
越来越多地使用元数据是对谁在使用我们的数据集以及如何使用数据集进行编程捕获。这种测量使产品管理和数据治理团队能够更深入地了解整个组织的数据使用情况,并影响未来的第三方数据投资、未来的风险管理战略和技术投资。这种衡量方法允许产品经理确定制作给定报告的成本是否值得投资,或者这些美元是否可以更好地投资于其他数据产品和消费模型。产品经理可以进一步探索整个组织中的团队以及他们最经常使用和使用的数据,以进一步增强面向最具影响力的超级用户的数据产品。

元数据的另一种常见用法是详细描述数据集及其包含的数据元素,用于计算组织的风险状况。这种使用在生成和存储有关个人的敏感数据的组织中占主导地位,这些个人通常是面向消费者的、金融服务或医疗保健组织,对消费者行为有深入的了解,并存储大量私人数据。元数据的这种使用使组织能够非常专注于保护敏感和受监管的数据。数据治理团队可以根据开放数据访问的价值确定合规失败的成本,同时模拟或多或少限制性数据访问策略的潜在风险。对过程的自动控制,包括数据访问、数据产品创建、访问审核和数据质量和完整性的自动检查,是对元数据进行编程消费以驱动和测量企业中的数据转换的附加方法。

这种控制、数据质量、风险管理和连接现实世界和物理世界的方案实施概念为创新创造了新的技术机会。DataHub是这一领域的一项创新,它促进了元数据的集中存储,以驱动复杂数据环境的联邦和自动化过程。
元数据成为现代数据架构中的连接粘合剂。允许不同的技术具有用于过程和访问自动化的通用参考层。元数据使数据使用者能够以统一的方式跨多个不同的集成点访问不同的数据。通过通用数据目录和功能存储的集中式元数据存储确保了公司范围内对数据、复杂性、风险和价值的了解,并使独立的工程团队能够实施其首选技术,同时集中维护公共参考点。

在我们探索数据沿袭及其对组织生产多样化数据产品、满足监管义务和简化复杂数据转换管道的价值时,请加入我们的下一次数据治理对话。别忘了报名,这样你就不会错过了。

关于作者

乔伊·贾布隆斯基

副总裁分析

Joey Jablonski是Pythian的分析副总裁,他领导战略合作,帮助客户制定数据战略,定义和执行数据治理计划,并构建分析模型,为现代数据驱动的组织提供动力。在Pythian之前,Joey是Manifold的产品副总裁,他在那里提出了产品心态是所有项目的一部分,允许在任何项目中快速交付价值,并随着时间的推移不断构建,以推动组织采用新的以数据为中心的能力。乔伊领导了包括高科技、制药和联邦政府在内的多个行业的合作。在Manifold之前,Joey曾在西北互惠银行、iHeartMedia和云技术合作伙伴担任行政领导职务。他在软件工程、高性能计算、网络安全、数据治理和数据工程方面拥有20多年的经验。

原文标题:METADATA-DRIVEN DATA GOVERNANCE: THE HOW AND WHY
原文作者:Joey Jablonski
原文链接:https://blog.pythian.com/metadata-driven-data-governance/

「喜欢这篇文章,您的关注和赞赏是给作者最好的鼓励」
关注作者
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文章的来源(墨天轮),文章链接,文章作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论