AutoMQ Table Topic:基于 Iceberg 构建流式数据湖新范式
导读近年来,Iceberg 已成为数据湖格式的事实标准。在国外,随着 Databricks 的收购行为以及 Confluent 推出 Table Flow 和 AWS 推出 S3 Tables,这一趋势愈发明显。AWS 在发布 S3 Tables 时披露的数据
导读近年来,Iceberg 已成为数据湖格式的事实标准。在国外,随着 Databricks 的收购行为以及 Confluent 推出 Table Flow 和 AWS 推出 S3 Tables,这一趋势愈发明显。AWS 在发布 S3 Tables 时披露的数据
在数字化转型进程中,用户交互行为产生的多维度数据已成为企业的重要战略资产。以短视频平台为例,基于用户点赞事件的实时推荐算法能显著提升用户活跃度和平台粘性。这类实时数据主要通过 Apache Kafka 流处理平台进行传输,通过其扇出(Fanout)机制实现多业