Tìm kiếm
27 kết quả cho “AZ outage”. Tìm không phân biệt dấu.
- When The Cloud Gets Dark — How Amazon's Outage Affected Airbnb Bài tóm tắt · Airbnb · 2011
…edium.com/airbnb-engineering/when-the-cloud-gets-dark-how-amazons-outage-affected-airbnb-66eaf8c0f162) Bối cảnh - Toàn bộ hạ tầng Airbnb năm 2011 trên AWS. Sự cố us-east tháng 4/20…
- A postmortem of our May 7, 2026 outage Bài tóm tắt · Coinbase · 2026
…m lạnh hỏng cùng lúc trong một data hall của AWS us-east-1 (AZ use1-az4 ). Rack tự tắt vì nhiệt, kéo theo EC2 và EBS trong toà nhà đó. Nhiều công ty khác cũng bị ảnh hưởng. - Theo…
- Lessons Netflix Learned from the AWS Outage Bài tóm tắt · Netflix · 2011
…với sự cố năm 2008 không (). Lúc này họ chạy ở 1 region, 3 AZ, phục vụ Mỹ và Canada. Thay đổi chính (những gì đã làm đúng) - Service stateless: instance nào cũng phục vụ được mọi…
- A Closer Look at the Christmas Eve Outage Bài tóm tắt · Netflix · 2012
…số ELB riêng. Kiến trúc chịu được mất một phần hoặc cả một AZ (chạy ba AZ, đủ chức năng với hai); các region (Mỹ, châu Âu) được cô lập để không kéo nhau sập, nhưng chưa chịu được…
- Behind the scenes: Redpanda Cloud's response to the GCP outage Bài tóm tắt · Redpanda · 2025
…ai năm sau khi ra mắt mới dám cam kết SLA 99,99%; cụm multi-AZ thiết kế cho SLO ít nhất 99,999%. - Năm trước đã chuyển sang observability tự host vì quy mô và chi phí; nếu còn dựa…
- AWS CNI lessons from a Production Outage Bài tóm tắt · Neon · 2025
…đương. - Là một trong những region đầu, subnet chỉ /20 mỗi AZ, tổng khoảng 12.000 IP (các region khác 24.000), vì load test cho thấy cụm chỉ cần tới 10.000 compute. Dịch vụ tăng n…
- Postmortem of database outage of January 31 Bài tóm tắt · GitLab · 2017
…g ngày (dùng để chép production sang staging), snapshot đĩa Azure (chỉ bật cho máy NFS, không cho DB), và replication (chỉ để failover, không phải DR). Chuyện gì đã xảy ra - Tải DB…
- No record left behind: How WarpStream can withstand cloud provider regional outages Bài tóm tắt · WarpStream · 2025
…- Nguồn lỗi thứ hai là deploy hỏng : họ deploy tuần tự từng AZ rồi từng region , nên một bản hỏng khó lan ra mọi nơi; cụm đa region chỉ có một region được deploy tại một thời điểm.…
- Slack's Outage on January 4th 2021 Bài tóm tắt · Slack · 2021
…trước capacity của dịch vụ managed. Liên quan - · · - Sự cố AZ năm 2021 dẫn tới kiến trúc cell: - Autoscale theo tín hiệu sai: - Tải đầu giờ do chính hệ tạo ra:…
- Report on our investigation of the 2025-10-20 incident in AWS us-east-1 Bài tóm tắt · PlanetScale · 2025
…ver DB vẫn ra được Internet nhưng không nói chuyện được với AZ khác. Họ chủ động reparent primary sang AZ khoẻ hoặc cùng AZ với ứng dụng của khách. Sau khi mạng lành, vài process (…
- An AKS Performance Journey: Part 2 — Networking It Out Bài tóm tắt · ASOS · 2021
…TCP; AKS chưa hỗ trợ vào 2/2021) và chế độ Transparent của Azure CNI (1/2021, giảm race conntrack). Vì sao - Latency đuôi đến từ những chi phí cố định cho mỗi kết nối ra ngoài (DN…
- How MDN's autocomplete search works Bài tóm tắt · Mozilla · 2021
MDN Web Docs thêm autocomplete để nhảy thẳng tới tài liệu bằng cách gõ một phần tiêu đề. Bản en-US có 11.690 tiêu đề (2021).
- Độ tin cậy và multi-region Chủ đề Thành viên
Thay đổi kiến trúc lớn thường không đến từ kế hoạch mà từ một sự cố đau đớn. Khi đã chạy nhiều vùng, nhiều giả định của hệ thống một vùng không còn đúng.
- Failover, replica và dự phòng dữ liệu Chủ đề Thành viên
Mọi hệ có trạng thái đều giữ nhiều bản (replica) để một máy chết không làm mất dịch vụ. Khó không nằm ở việc có bản sao mà ở lúc chuyển sang bản sao:
- Chi phí hạ tầng và build vs buy Chủ đề Thành viên
Khi còn nhỏ, chi phí hạ tầng là chuyện phụ và cloud là lựa chọn hiển nhiên. Khi lớn lên, hoá đơn có thể chiếm phần lớn giá vốn. Hai câu hỏi xuất hiện: tối ưu chi phí trên nền đang có thế nào, và khi nào nên tự xây (hoặc…
- Sự cố và postmortem Chủ đề Thành viên
Nhiều bước ngoặt kiến trúc trong wiki bắt đầu từ một sự cố: Netflix lên cloud sau 3 ngày không gửi được DVD, Twitter viết lại hệ thống sau World Cup 2010, Instagram đi nhiều data center sau trận bão 2012. Trang này gom…
- Deploy và release an toàn Chủ đề Thành viên
Phần lớn sự cố bắt đầu bằng một thay đổi: code mới, cấu hình mới, hạ tầng mới. Khi hệ thống và tổ chức lớn lên, câu hỏi là làm sao đưa thay đổi lên production thường xuyên mà vẫn giới hạn được thiệt hại khi có lỗi.
- Tự động hoá vận hành và auto-remediation Chủ đề Thành viên
Khi số máy, shard, pod tăng lên hàng nghìn, lỗi "hiếm" (một node chết, một đĩa hỏng, một replica trễ) thành chuyện hằng ngày, và thao tác tay không còn theo kịp: Stripe có hàng trăm lần shard suy giảm mỗi năm, mỗi lần…
- Nền tảng nội bộ cho service (đường ray chung) Chủ đề Thành viên
Tách hệ thống thành nhiều phần (service, hoặc component trong một monolith) giải được bài toán tổ chức. Nhưng nếu mỗi team tự làm RPC, retry, log, metric, contract theo cách riêng, thì ta chỉ đổi một kiểu hỗn loạn lấy…
- Kiểm thử độ tin cậy (chaos, fault injection, mô phỏng tất định) Chủ đề Thành viên
Lỗi trong hệ phân tán là chắc chắn (máy chết, zone mất, dependency chậm, cấu hình sai), nhưng phần lớn lỗi nằm ở những tổ hợp hiếm mà test chức năng không chạm tới. Bài toán là chủ động gây lỗi để biết hệ thống phản ứng…
- Multi-tenancy và cô lập tenant Chủ đề Thành viên
Một hệ phục vụ nhiều khách (tenant: workspace, shop, organization, account, service nội bộ) trên cùng hạ tầng thì rẻ và dễ vận hành, vì tài nguyên được dùng chung. Cái giá là bốn câu hỏi đi theo hệ suốt đời:
- Xử lý sự cố và on-call Chủ đề Thành viên
Khi hệ còn nhỏ, vài người biết hết mọi thứ; có lỗi thì người thấy đầu tiên sửa luôn. Khi có hàng trăm service và hàng trăm engineer, câu hỏi đổi khác:
- Netflix Công ty Thành viên
Sự cố hỏng DB năm 2008 dẫn tới 7 năm lên AWS theo hướng cloud-native . Bài kiểm tra lớn đầu tiên là sự cố AWS US-East năm 2011: kiến trúc stateless, nhiều zone, fallback chịu được, nhưng rút khỏi zone phải làm tay. Từ…
- Airbnb Công ty Thành viên
Airbnb chuyển từ một ứng dụng Rails khổng lồ sang SOA, và lộ ra chi phí test: deep integration test cho mọi service không scale, nên họ chuyển sang tháp test + CD có canary analysis . Năm 2025 với ba trụ sản phẩm, data…
- Dropbox Công ty Thành viên
Dropbox luôn là hybrid: metadata ở data center riêng, nội dung file trên S3. Ở ~500 PB họ tự xây Magic Pocket, theo Dropbox vì hiệu năng và unit economics . Cái giá kèm theo là phải tự dựng cả backbone và edge network .…
- How we built Status Page Bài tóm tắt · GitLab · 2020
…riêng, giấy phép MIT, đọc các file JSON đó. - Chỉ hỗ trợ Amazon S3: GitLab.com chạy trên Google Cloud, nên trang trạng thái phải sống được khi Google Cloud (và GitLab.com) sập. Vì…
- Active-Active for Multi-Regional Resiliency Bài tóm tắt · Netflix · 2013
…trước khi phủ toàn cầu. - Diễn tập: Chaos Gorilla (mất một AZ), Split-brain (cắt kết nối giữa region, chạy nhiều lần, tìm và sửa nhiều lỗi), Chaos Kong (dồn phần lớn traffic sang…