WarpStream

Mạch tiến hoá

Kafka "diskless" trên object storage. Năm 2025 ra mắt cụm đa region: agent ghi quorum 3 bucket ở 3 region, control plane trên DynamoDB Global Tables hoặc Spanner đa region với một leader được bầu; mất trọn một region mà không mất record nào (RPO=0) WarpStream 2025. Năm 2026 WarpStream mô tả cách chuyển producer từ Kafka sang không downtime: Agent làm proxy về cụm cũ, rồi cutover từng topic trong vài giây (bài nhà cung cấp) WarpStream 2026. Cũng năm 2026, WarpStream bỏ bước commit ở Control Plane khỏi đường ack của producer (Lightning Topics), và dùng cùng cơ chế để Agent tiếp tục nhận ghi khi Control Plane sập (Ripcord Mode) WarpStream 2026. Hai case study năm 2025 cho thấy ai dùng Kafka trên object storage và vì sao: Grafana Labs tách đường ghi khỏi đường đọc của Mimir và tránh phí giữa AZ WarpStream 2025; Robinhood chuyển log theo giờ giao dịch, rẻ hơn 45% WarpStream 2025. Để khách chuyển sang, WarpStream migrate cả schema registry bằng vòng reconcile liên tục giữ nguyên schema ID (2025) WarpStream 2025. Năm 2024 họ mô tả phần đo usage cho billing: gửi lại thoải mái nhờ idempotency key và gom số đo trong bộ nhớ ở Proxy WarpStream 2024. Năm 2024 họ lập luận rằng chính kiến trúc không trạng thái cho phép BYOC mà nhà cung cấp không cần quyền vào hạ tầng của khách WarpStream 2024.

Timeline

Năm = năm sự kiện theo bài (có thể sớm hơn năm đăng bài).