手记

元宇宙网格是数据去中心化的第三次浪潮

元网格(Meta Grid)是数据去中心化的第三次浪潮

我们也可以像分解操作和分析数据那样分解元数据单体

微服务分散操作数据[1]。数据网格分散分析数据[2]。在这篇短文中,我主张需要第三次数据分散化浪潮——即元数据的分散,第三次数据分散化浪潮即为元网格[3]。

大公司中的元数据管理的实际状况

在元数据层,元数据仓库描绘IT环境中的特定元素。[4]它们都提供基于元数据的具体且独特的功能。元数据仓库可以是各种形式,从电子表格到独立的精炼技术,再到大型平台的模块。

数据团队以及众多的数据领导者,如首席数据官、首席信息官、数据保护官、首席信息安全官、记录管理者和信息经理等,使用元数据仓库来执行他们的任务,通过描绘公司IT景观的某些方面。

然而,每个元数据仓库都创建了一个“单一视图”的元数据;一个“世界单一视图”的单一视图。[5]它的大小并不大,但它是孤立无援的,并且与使用不同方法的其他元数据仓库所描述的现实形成对立。

一个非常简短的Meta Grid介绍及其背后的原因

元网格技术既与微服务架构差异显著,同时也有相似之处。

元数据网格小巧、简单且速度慢,与大型、复杂且快速的微服务和数据网状架构相比,它小巧、简单且速度慢:元数据总量通常远小于数据源或系统本身,不需要复杂的编程来交换元数据,实时数据交换也不重要。因此,它小巧、简单且速度慢。

然而,Meta Grid 和微服务以及数据网格实际上是一样的概念:它是一种将数据去中心化的技术,将大型单一系统拆分成最小且独立的组件。

微服务将运营数据的大块拆分,使公司的价值链更加灵活、活跃、适应性强和可扩展。数据网格释放公司的数据分析潜力,在克服与传统企业级数据仓库利益相关者之间的权力游戏后,提供了新的基于机器学习和人工智能的解决方案。

元数据网格(Meta Grid)是一个机会,通过它我们可以了解公司的IT环境,将其从服务于不同目的的多个孤立的仓库中解放出来。众多的元数据仓库包含应用程序列表、数据类型、敏感级别、保密级别、集成、接口、IT供应商、能力、流程、端点等大量信息。所有这些对操作、创新和监管目的至关重要的元数据,由遍布企业的多个团队管理和维护。

换句话说:虽然Meta Grid的技术解决方案架构本身很简单,但对Grid的理解起来却并不简单。这包括所有管理公司IT环境和架构的元数据仓库所利用的技术能力,从而涵盖了整个企业的方方面面。

[1] S. Newman; 《微服务构建》 (2021,) O'Reilly

[2] Z. 德赫甘尼,数据网 (2023),奥莱利

[3] O. Olesen-Bagneux; 元数据管理基础(2025年),O'Reilly 一书

[4] 数据管理手册(2024 ,技术出版社)

[5] M. Skelton、M. Pais; 团队拓扑学 (2019年), IT Revolution Press(IT革命出版社)

0人推荐
随时随地看视频
慕课网APP