1、被广泛关注的智能湖仓架构
时间：2022-03-05 10:12:02 | 来源：行业动态
时间：2022-03-05 10:12:02 来源：行业动态
理解智能湖仓架构的现在和未来，需要先了解它的过去。早在 2017 年，智能湖仓架构就已初具雏形。当时，亚马逊云科技发布了 Amazon Redshift Spectrum，让 Amazon Redshift 具备了打通数据仓库和数据湖的能力，实现了跨数据湖、数据仓库的数据查询。
这件事情启发了智能湖仓架构的形成。在 2020 年的亚马逊云科技 re:Invent 大会上，亚马逊云科技正式发布智能湖仓。如果从早期的技术探索开始算起，在 2021 亚马逊云科技 re:Invent 大会上发布的 Serverless 能力，代表了智能湖仓架构的第 8 轮技术演进。如今，智能湖仓基于 Amazon S3 构建数据湖，绕湖集成数据仓库、大数据处理、日志分析、机器学习数据服务，利用 Amazon Lake Formation、Amazon Glue 等工具可以实现数据的自由流动与统一治理。
具体而言，智能湖仓架构下，首先需要打破数据孤岛形成一个数据湖；其次，需要围绕着数据湖，在不同应用场景为用户提供相应的分析工具；另外，需要确保数据在湖、仓以及专门的服务之间能够自由移动；此外，需要确保用统一的方式去管理湖里面数据的安全性、访问控制和审计；最终，需要能够采用低成本的方法将湖、仓各自的优势有效利用起来，并利用人工智能等创新手段进行创新。
就像 Amazon Redshift 在 2012 年发布时，引导了云原生数仓的发展方向一样，智能湖仓架构一经发布就引发业内广泛关注，一方面是因为亚马逊云科技作为头部云厂商的行业地位，另一方面是因为此架构在技术上的创新思路能够为行业带来一些新的思考。
智能湖仓更强调架构而非产品，更强调数据的自由流动与统一治理，以及基于湖仓的智能创新。如今，智能湖仓架构不是简单地将湖与仓打通，而是将湖、仓与专门构建的数据服务连接成为一个整体，让数据在其间无缝移动。面对向 TB 级、PB 级，甚至 EB 级增长的数据，如何存和如何用不再是相对孤立的话题。智能湖仓向行业传递了一个信号：企业需要统一数据分析工具，实现数据在整个数据平台的自由流转。
不管是企业数据管理理念的视角，还是在技术视角下，智能湖仓架构被广泛关注也意味着，随着数据湖和数据仓库的边界在逐渐淡化，基于两者的大数据处理体系的架构正在被重构。
在线咨询
