苏兴
Employers on the program
- 2024ByteDance1 talk
Events1
Conferences1
Talks1
Years active2024
Appearances by year
- Flink Forward
Talks
| Date | Event | Conference | Role | Title | Links |
|---|---|---|---|---|---|
| Nov 29, 2024 | Flink Forward Asia 2024 Shanghai | Flink Forward | speaker | 抖音集团基于Paimon的流式数据湖应用实践 as ByteDance (Douyin) 目前抖音数仓主要采用 Lambda 架构实现,其中实时链路使用 Flink 和 Kafka 进行搭建,主要优点是数据新鲜度高、架构成熟,但是在开发、问题排查等阶段的成本较高,同时在流式场景特有的中间状态存储也面临着巨大的技术挑战。 为了解决上述问题,数据工程团队探索了多种技术方案,最终选择基于 Flink 和…Show less目前抖音数仓主要采用 Lambda 架构实现,其中实时链路使用 Flink 和 Kafka 进行搭建,主要优点是数据新鲜度高、架构成熟,但是在开发、问题排查等阶段的成本较高,同时在流式场景特有的中间状态存储也面临着巨大的技术挑战。 为了解决上述问题,数据工程团队探索了多种技术方案,最终选择基于 Flink 和 Apache Paimon 构建流式湖仓。本文将基于两个典型业务实时数仓场景,介绍 Apache Paimon 在抖音集团直播、游戏业务的流式湖仓生产实践。 |
Frequent co-speakers
No one else spoke at two or more of the same events.
Speakers with the same name are merged into one entry, so this page may combine more than one person. Affiliations are shown as each conference listed them.