虎牙基于 Iceberg+Paimon 的实时湖仓实践
导读随着大数据的不断发展,数据体量越来越大,为了更好地支持内部湖仓一体的使用场景,虎牙基于 Iceberg + Paimon 构建了实时湖仓架构。本文将对这一架构设计和实践过程中的痛点及优化进行介绍。
导读随着大数据的不断发展,数据体量越来越大,为了更好地支持内部湖仓一体的使用场景,虎牙基于 Iceberg + Paimon 构建了实时湖仓架构。本文将对这一架构设计和实践过程中的痛点及优化进行介绍。
与 Flink 一起进行实时分析:Apache Paimon 在需要摄取和处理实时数据流的场景中表现出色。这使其非常适合像点击流分析、物联网数据处理和金融交易分析等场景。