Lessons from Slack:在 180PB 規模上維運 Iceberg
TLDR
After reading this article, you will learn:
- Slack 如何在每天有超過 300TB 資料流入 180PB 規模的 Data Lakehouse 下,穩定維持 99.9% 的 Iceberg 維護成功率
- Slack 在開發 IceChipper 時的思考過程:4 種資料、5 條設計準則、3 條被否決的替代方案
- Slack 在維護 4,000 張 Iceberg tables 過程中遇到的 3 大痛點以及他們如何因應