主页

ThoughtWorks最近一期的技术雷达，把Data Mesh从“评估”调升到了“试验”。ThoughtWorks眼中的“试验”意味着这项技术“值得追求。重要的是理解如何建立这种能力。企业应该在风险可控的项目中尝试此技术。” 文章内容大部分来自 Zhamak Dehghani 的《How to Move Beyond a Monolithic Data Lake to a Distributed Data Mesh》 讲了如何将单体的数据湖，变为分布式的数据网格（Data Mesh）。 那么，未来的企业数据中心，可能企业将告别建造单体的数据湖，转而成为分布式的数据水系么？

序言 在我们日常的工作中，不断的接触大数据相关的内容。然而我们发现，无论是大数据组件，还是整个大数据体系，都没有完善安全机制。诸多组件的管理端口和通信端口都可以被非授权访问。 配置Kerberos的认证，无论是搭配Sentry还是Ranger，整个实践过程也并不简单，上下游和其他业务系统的安全对接也是困难重重。 当数据被加工使用时，数据访问权限控制，敏感数据脱敏，隐私数据保护成了另外一个不可回避的问题。 因此，我们组成了这么一个松散的兴趣小组，在大数据与安全相结合的交叉领域，探索一些新的技术可能性。