Data Mesh

第 5 章 联合计算治理原则

本作品已使用人工智能进行翻译。欢迎您提供反馈和意见：[e-mail]

要在地球上实现和平，人类就必须进化成为学会先看到整体的新生命。

伊曼纽尔-康德

焕然一新 数据治理是数据网格发挥作用所缺少的也是最后一块。到目前为止，Data Mesh 期望独立团队拥有并提供分析数据。它希望这些数据能作为产品提供，并伴随着丰富数据消费者体验的行为，让他们发现、信任并为多种目的使用这些数据。这在很大程度上依赖于一套全新的自助服务数据基础设施功能，从而使这一切成为可能。治理是一种机制，可确保独立数据产品组成的 Data Mesh 作为一个整体是安全、可信的，最重要的是通过节点之间的相互连接实现价值。

我必须承认，"治理 "这个词让我，或许也让很多人感到不安。它让人联想到中央、僵化、权威的决策系统和控制流程。就数据治理而言，它唤起了人们对中央团队和流程的记忆，这些团队和流程成为提供数据、使用数据以及最终从数据中获取价值的瓶颈。

数据治理团队和流程都有崇高的目标：确保在风险可控的情况下，在整个组织内提供安全、优质、一致、合规、尊重隐私和可用的数据。这些目标的初衷是好的，也是必要的。然而，传统上，我们实现这些目标的方法一直是一个摩擦点。过去，治理工作主要依赖人工干预、复杂的数据验证和认证中央流程，以及建立全局数据标准模型，对变更的支持微乎其微，而且往往在事后才参与，为时已晚。这种治理方法对于分散的 Data Mesh 来说根本行不通。

相比之下，Data Mesh 治理则能适应数据环境的不断变化。它将数据建模和质量的责任下放给各个领域，并使计算指令高度自动化，以确保数据的安全性、合规性、质量和可用性。在数据生命周期的早期和整个过程中，都会以自动化的方式管理风险。它将计算策略嵌入到每个领域和数据产品中。Data Mesh 将这种治理模式称为联合计算治理。

联盟和计算治理是一种由领域数据产品所有者和数据平台产品所有者联盟领导的决策模式，拥有自主权和领域本地决策权，同时创建并遵守一套全球规则--适用于所有数据产品及其接口的规则。全球规则由法律和安全等全球专业部门提供信息和支持，以确保建立一个可信、安全和可互操作的生态系统。它解决了当今数据管理最常见的错误之一¹它解决了当今数据管理最常见的错误之一：作为一项 IT 计划，其组织模式与业务并行，而没有嵌入到业务中。

综观治理一词，其定义从 "以权威进行统治 "软化为 "掌舵和引导船只 "的原始含义。我选择将治理一词保留在 Data Mesh 词汇表中，但我打算让它保留其原始含义，而不是后来的定义。

除了现有的数据管理目标，数据 Mesh 还必须解决一系列新的问题。将数据所有权分配给各个域会引起 、数据 的互操作性和数据通信的标准化，例如所有域的数据展示和查询的标准化。互操作性是 Data Mesh 满足大多数数据使用案例的基本特征，在这些使用案例中，我们从 Data Mesh 上独立数据产品的关联中获得洞察力和智能，在大规模数据产品上创建联合、查找交集或执行其他图或集合操作。

回到达夫的例子，达夫要围绕新兴艺术家提供一套新的服务，首先需要发现谁是新兴艺术家。他们需要能够将社交媒体平台上提及新兴艺术家的数据关联起来，查看用户收听艺术家节目的趋势和艺术家的简介。如果没有一定程度的数据产品互操作性，这项任务是不可能完成的。

我们不仅需要实现全球标准化，以便将独立的数据产品关联起来，还需要能够轻松地实现这一点--具有一致的体验，并且安全，不会泄露机密信息。数据管理问题的延伸使这种无缝和一致的体验成为可能。 ...