数据仓库与湖仓一体架构:从OLAP到实时分析的演进
深入讲解数据仓库、数据湖、湖仓一体架构的演进历程,涵盖维度建模、ETL流程、实时数仓、Iceberg/Hudi等核心技术,提供ClickHouse、Spark的实战案例。
tag
深入讲解数据仓库、数据湖、湖仓一体架构的演进历程,涵盖维度建模、ETL流程、实时数仓、Iceberg/Hudi等核心技术,提供ClickHouse、Spark的实战案例。
ClickHouse 是一个用于实时分析的列式数据库管理系统,由 Yandex 开发。文章主要介绍 ClickHouse 的架构、查询语言、性能优化等方面。
二、核心架构差异 2.1 ClickHouse 架构 特点: * 典型的 Shared-Nothing 架构 ; * 每个节点都是独立的存储 + 计算单元; * 通过 Distributed 表 跨节点分布查询; * 数据压缩率高 (可达 10x~50x); * 列式存储 + 向量化执行引...