宽表设计的三大误区，90%的人都踩过坑！
干数仓这么多年，切身感受宽表就像火锅里的“万能底料”——谁都想往里加菜，但加多了会串味，加少了又不够香。
iceberg
小h漫谈（22）：智能物流介绍
而日本早稻田大学教授西泽修提出的“物流冰山说”则认为，物流就像一座冰山，其中沉在水面以下的是我们看不到的黑色区域，这部分就是“黑大陆”，而这是物流尚待开发的领域，也是物流的潜力所在。这两个理论都旨在说明物流活动的模糊性和巨大潜力。
诗歌：《问情》●文/邹武
作者简介：邹武，一个喜欢诗歌的仡佬族汉子，一个喜欢啃两口文字的山里人，一个喜欢海阔天空的围观者!最新作品有《听海》《美酒》《叶冕与吴斛》《我的窗口》《我的面子》《端详生活》等。
女人无法抵挡的法式 ｜ 法式针织设计案例50款
早春的浪漫，从法式穿搭开始。这种注重服装的剪裁和质地，讲究细节和线条的流畅感的穿搭风格，追求的是一种轻松自在、闲适洒脱的感觉。值得注意的是，春日的法式风格不仅仅是碎花茶歇裙，它还有着更多元化的表现形式，比如：优雅知性、简约随性、浪漫度假等等，以适应生活中不同场
Iceberg 在微信实验平台的应用实践
导读在当今数字化时代，实验平台对于数据分析和决策起着至关重要的作用。微信实验平台处理着海量的数据，面临着高计算量和复杂的数据管理挑战。Iceberg 作为一种先进的数据存储架构，为解决这些问题提供了新的思路和方法。本文详细阐述了微信实验平台如何利用 Icebe
虎牙基于 Iceberg+Paimon 的实时湖仓实践
导读随着大数据的不断发展，数据体量越来越大，为了更好地支持内部湖仓一体的使用场景，虎牙基于 Iceberg + Paimon 构建了实时湖仓架构。本文将对这一架构设计和实践过程中的痛点及优化进行介绍。
腾讯云基于 Iceberg 的批流一体实践
导读腾讯云自 2019 年就开始接触 Apache Iceberg 项目，并开始基于 Iceberg 构建湖仓一体数据架构。经过多年深入使用和优化，沉淀出了一套基于 Iceberg 的完整的全场景批流一体解决方案。本次分享将简单介绍腾讯云湖仓一体的架构、方案简
Apache Paimon 与 Apache Iceberg
与 Flink 一起进行实时分析：Apache Paimon 在需要摄取和处理实时数据流的场景中表现出色。这使其非常适合像点击流分析、物联网数据处理和金融交易分析等场景。
Apache Doris + Iceberg 超大规模湖仓一体实践
天翼云基于 Apache Doris 成功落地项目已超 20 个，整体集群规模超 50 套，部署节点超 3000 个，存储容量超 15PB。天翼云基于 Apache Doris 和 Apache Iceberg 构建的湖仓一体方案，兼具灵活性、高性能和低成本优
到底是什么是“数据湖仓”？
前面我们提到，数据仓库出现于1990年代，主要基于MPP（Massively Parallel Processing，大规模并行处理）或者关系型数据库实现，用于企业做数据存储、处理和分析，发展数据看板、BI（商业智能）等用途。
Lakehouse 如何重塑企业数据生态？
大数据架构经过多年的演进，传统数据仓库和数据湖的局限性日益凸显。在此背景下，湖仓一体 Lakehouse 凭借其开放性和成本效益，迅速成为当今数据平台的主流架构。然而，随着进入 Data + AI 驱动的新时代，企业对实时数据分析的需求不断增加，对半结构化和非
AutoMQ Table Topic：基于 Iceberg 构建流式数据湖新范式
导读近年来，Iceberg 已成为数据湖格式的事实标准。在国外，随着 Databricks 的收购行为以及 Confluent 推出 Table Flow 和 AWS 推出 S3 Tables，这一趋势愈发明显。AWS 在发布 S3 Tables 时披露的数据
Gravitino: 助力大数据赋能 AI 的统一元数据管理平台
导读随着人工智能（AI）与多云架构时代的到来，企业和组织面临着前所未有的数据管理的挑战。为了应对这些挑战，Gravitino 项目应运而生，旨在提供一个强大的开源大数据组件，以支持现代环境中高效的数据资产管理。本文将详细介绍 Gravitino 项目的背景、目
AutoMQ x OSS 的 Iceberg 数据入湖的最佳实践
在数字化转型进程中，用户交互行为产生的多维度数据已成为企业的重要战略资产。以短视频平台为例，基于用户点赞事件的实时推荐算法能显著提升用户活跃度和平台粘性。这类实时数据主要通过 Apache Kafka 流处理平台进行传输，通过其扇出（Fanout）机制实现多业
深入了解Cloudera新一代混合数据湖仓一体架构
人工智能(AI)正逐步成为重塑企业运营方式的强大力量。IDC预测，由于数据平台在数据存储、标准化和访问方面的采用率的增加，超过 50% 的中国企业将准备好使用GenAI来处理数据 。根据Cloudera的一项研究预测，美国有超过三分之一(36%)的企业正处于探
AWS 宣称在客户另有需求之前将一直坚持使用 Iceberg
尽管业界对 Iceberg 的认可度在不断提升，但关于其竞争对手 Delta Lake (由 Databricks 创建并在 Linux 基金会管理下开源) 的未来仍存在疑问。目前，Delta Lake 是 Microsoft 和 SAP 等软件巨头的首选格式
Ray 在 Bilibili 的场景探索与落地实践
导读2024 年 12 月 6 日，由 Ray 中文社区、蚂蚁开源联合主办的 Ray Forward 2024 年度盛会在北京蚂蚁 T 空间成功举办。其中，Bilibili 基础架构部技术专家郑志升分享了《Ray 在 Bilibili 的场景探索与落地实践》。
Apache Iceberg成为事实上的标准，湖仓一体真的来了！
数据湖仓一体自2020年起就备受瞩目，始终是数据分析领域的一个热门话题。虽然湖仓一体的需求不断增长，但由于标准不统一，行业巨头企业方案支持的标准互通性差，湖仓一体市场并未像人们期待的那样快速发展。
iceberg apache apacheiceberg 2025-01-16 21:34 9
开放表格：大数据已死，亦将永存
去年底的2024 AWS re：Invent大会，新任CEO Matt Garman发布了一众与AI相关的新服务。在这些新服务中，新的Amazon S3 Tables服务看似不起眼，却对于未来数据存储有着深远影响。
Lakehouse为何有望在2025年实现大幅增长？
大约八年前，当企业在数据湖的随心所欲和数据仓库的繁琐之间寻找中间地带时，Lakehouse出现了，这种架构模式吸引了一些追随者，但增长并不显著。然而，随着 2025 年的到来，Lakehouse将在多种因素的共同作用下实现强劲增长。