
指标 描述 资源 Resource 服务器中的硬件资源 利用率 Utilization 资源提供服务的平均时间 饱和度 Saturation 资源承担额外工作量的能力,这类工作通常 排队 错误 Errors 错误事件数量。
导读:Apache 社区在2022年4月30日发布了Apache Hudi 0.11.0版本,其中包括一系列的新功能和提升优化。
“数正规买球的网站据湖三剑客”Hudi、Delta Lake和Iceberg 深度对比
Iceberg 提供 ACID 事务能力,上游数据写入即可见,不影响当前数据处理任务,这大大简化了 ETL;
基于Apache Hudi 的CDC数据入湖「内附干货PPT下载渠道」
CDC的全称是Change data Capture,即变更数据捕获,它是数据库领域非常常见的技术,主要用于捕获数据库的一些变更,然后可以把变更数据发送到下游。
导读:今天分享的主题是实时数据湖在字节跳动的实践,将围绕下面四点展开:对实时数据湖的解读。在落地实时数据湖的过程中遇到的一些挑战和应对方式。
2021 年,字节跳动旗下产品总 MAU 已超过 19 亿。在以抖音、今日头条、西瓜视频等为代表的产品业务背景下,强大的推荐系统显得尤为重要。Flink 提供了非常强大的 SQL 模块和有状态计算模块。
导读本文将分享B站基于Hudi+Flink打造流式数据湖的落地实践,主要聚焦于数据湖引入后,在批流融合过程中遇到的若干问题及优化方案。文章包括四个部分:1. 背景与挑战,简要介绍B站数仓的现状和痛点,以及打造数据湖能力的愿景;2.
Hudi基础入门篇-09--Hudi 快速体验使用--HDFS 安装部署测试