Tìm kiếm
21 kết quả cho “retry storm”. Tìm không phân biệt dấu.
- How Uber Protects Against Retry Storms Bài tóm tắt · Uber · 2026
…bài gốc](https://www.uber.com/us/en/blog/protecting-against-retry-storms/) Bài thứ hai của một cặp; nền của nó là phân tích phụ thuộc: . Bối cảnh - Chỉnh cấu hình retry và retry bu…
- 25% or 6 to 4: The 11/6/23 Authentication Outage Bài tóm tắt · Discord · 2023
…t ngưỡng mới restart an toàn, mà quy trình không kiểm); app retry lỗi xác thực tạo retry storm . - Alert đầu tiên sau khoảng 4 phút (đã có cuộc gọi sự cố từ trước). Biểu đồ "thời g…
- How recurring network maintenance exposed 6 bugs Bài tóm tắt · Jane Street · 2026
…S, nên lần kết nối kẹt ở DNS không bao giờ timeout. 4. Vòng retry của Kafka client báo timeout nhưng không huỷ lần thử bên dưới. 5. Bootstrap của Kafka client nhân bản các lần tra…
- Scryer: Netflix's Predictive Auto Scaling Engine Bài tóm tắt · Netflix · 2013
…ic tụt đột ngột kích hoạt scale-down, rồi khi sự cố hết thì retry storm ập vào một cụm đã bị thu nhỏ. - Mẫu tải thay đổi trong ngày: có lúc tải tăng nhanh khi cụm chỉ ở 20% kích th…
- Flannel: An Application-Level Edge Cache to Make Slack Scale Bài tóm tắt · Slack · 2017
…mạng rồi cùng vào) đè nặng backend: kết nối chậm hơn, nhiều retry hơn. Thay đổi chính - Flannel: cache ở tầng ứng dụng đặt tại các edge PoP. Client kết nối Flannel; Flannel gom dữ…
- Hot partition và thundering herd Chủ đề Thành viên
Chia dữ liệu và tải ra nhiều máy chỉ hiệu quả khi tải chia đều. Thực tế tải lệch: một khách hàng khổng lồ, một kênh có @everyone, một bài của người nổi tiếng. Có hai dạng hay gặp:
- Load shedding, rate limit và backpressure Chủ đề Thành viên
Mọi hệ đều có lúc nhận nhiều việc hơn sức làm: spike của người dùng, client nội bộ có bug, dependency chậm đi, retry dồn lại. Theo Discord, khi chạm giới hạn năng lực thì đó là bài toán kinh tế: hoặc tăng cung (thêm…
- Event-driven, message queue và Kafka Chủ đề Thành viên
Khi một hệ có nhiều bên cần biết "có gì vừa xảy ra" (đơn hàng đổi trạng thái, tin đăng được sửa, ticket được cập nhật), gọi đồng bộ từng bên một làm producer phải biết mọi consumer, và một consumer chậm kéo chậm cả…
- Sự cố và postmortem Chủ đề Thành viên
Nhiều bước ngoặt kiến trúc trong wiki bắt đầu từ một sự cố: Netflix lên cloud sau 3 ngày không gửi được DVD, Twitter viết lại hệ thống sau World Cup 2010, Instagram đi nhiều data center sau trận bão 2012. Trang này gom…
- Nền tảng nội bộ cho service (đường ray chung) Chủ đề Thành viên
Tách hệ thống thành nhiều phần (service, hoặc component trong một monolith) giải được bài toán tổ chức. Nhưng nếu mỗi team tự làm RPC, retry, log, metric, contract theo cách riêng, thì ta chỉ đổi một kiểu hỗn loạn lấy…
- Stream processing Chủ đề Thành viên
Khi batch hằng ngày hay hằng giờ không còn đủ tươi (chi tiêu quảng cáo phải dừng đúng lúc chạm ngân sách, dashboard MRR không được trễ 24 giờ, alert phải bắn khi contest sắp đầy), hệ phải tính liên tục trên luồng sự…
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- Large-Scale Automated Dependency Analysis Across Uber's Service Mesh Bài tóm tắt · Uber · 2026
…sis/) Bài đầu của một cặp; bài sau dùng kết quả này để chặn retry storm: . Bối cảnh - Trong kiến trúc microservice của Uber, khi một request lỗi ở service gốc, khó biết phụ thuộc h…
- Uber Công ty Thành viên
Một vòng đủ: monolith → microservices → tổ chức lại microservices. Năm 2012–2013 Uber có hai monolith; khi lên hàng trăm kỹ sư thì tách. Lý do chủ yếu là tổ chức. Năm 2015 họ có 500+ service và phải chuẩn hoá contract…
- How Uber Conquered Database Overload: From Static Rate-Limiting to Intelligent Load Management Bài tóm tắt · Uber · 2026
…trol plane. - Ở quy mô này quá tải lan dây chuyền (timeout, retry dồn), và trong môi trường nhiều tenant phải công bằng. Thay đổi chính - Thử đầu tiên: quota trong query engine, th…
- Geosharded Recommendations Part 3: Consistency Bài tóm tắt · Tinder · 2019
…ai shard và các lệnh ghi sau đó hỏng. - Chuẩn bị cho lỗi: - retry với exponential backoff có jitter; - worker đọc Kafka bất đồng bộ thì ít lo latency và có checkpoint để chạy tiếp…
- Introducing uForwarder: The Consumer Proxy for Kafka Async Queuing Bài tóm tắt · Uber · 2026
…trễ (nguồn upstream chưa sẵn sàng khi event tới) và tự viết retry hay cơ chế delay riêng. - Cần cô lập : message non-production không được làm hỏng service production; message nên…
- Uber's Rate Limiting System Bài tóm tắt · Uber · 2026
…hiều instance Redis. GRL chặn quá tải lúc đỉnh, failover và retry storm, và là công cụ của playbook sự cố (áp limit có mục tiêu lên caller hay procedure trong vài giây, không deplo…
- New Tweets per second record, and how! Bài tóm tắt · Twitter · 2013
…etworking theo cách riêng, họ gặp thundering herd do client retry dồn dập vào service chậm và không có back-pressure nhất quán. Họ xây Futures + Finagle (thư viện client/server chu…
- Discord Công ty Thành viên
Hiếm có công ty nào kể cùng một bài toán qua 6 năm như Discord. Năm 2015 họ cố ý dùng một replica set MongoDB để ra sản phẩm trong 2 tháng, kèm đường thoát. Họ phân tích workload rồi chuyển sang Cassandra 12 node với…
- Chaos Testing an Application on AWS Bài tóm tắt · Goldman Sachs · 2022
…pendency); hình dạng traffic bằng k6 (tăng user, đỉnh nhọn, retry storm, payload to nhỏ). - Game day: chọn một kịch bản từ bộ test mà không báo trước cho team; team phải chẩn đoán…