runtime

基于 Flink 进行增量批计算的探索与实践

在探讨为什么要做增量计算之前,我们先简单的聊聊增量计算的定义。增量计算是指面向增量数据的处理,与之相对的是全量计算。传统的批计算通常采用全量计算的方式,它会通过单次执行 SQL 语句来达到预期目标。在这一次处理中,作业会读取所有所需数据,并生成一个完整的结果集

sql runtime flink 2025-01-08 10:22  7