Tìm kiếm
20 kết quả cho “Drain”. Tìm không phân biệt dấu.
- Stack Overflow: How We Do Deployment - 2016 Edition Bài tóm tắt · Stack Overflow · 2016
…Deploy một web server: báo HAProxy ngừng gửi request mới ( DRAIN ) → chờ request đang chạy xong → dừng site IIS → báo HAProxy server đã down → robocopy code mới → khởi động site →…
- Canary rollouts: upgrade models in production without downtime Bài tóm tắt · Together AI · 2026
…i traffic → chờ 30 giây cho cache routing toàn cục hội tụ → drain source → chờ → metric gate → mới ghi bậc là xong. Lên thì capacity đi trước traffic; xuống thì traffic đi trước ca…
- Slack's Migration to a Cellular Architecture Bài tóm tắt · Slack · 2023
Phần lớn hạ tầng lõi ở nhiều AZ trong một region (us-east-1). Ngày 30/6/2021, một đường mạng nối một AZ với các AZ khác lỗi chập chờn hai lần; người dùng thấy lỗi dù kiến trúc nhiều AZ lẽ ra che được.
- Deploy và release an toàn Chủ đề Thành viên
Phần lớn sự cố bắt đầu bằng một thay đổi: code mới, cấu hình mới, hạ tầng mới. Khi hệ thống và tổ chức lớn lên, câu hỏi là làm sao đưa thay đổi lên production thường xuyên mà vẫn giới hạn được thiệt hại khi có lỗi.
- Tự động hoá vận hành và auto-remediation Chủ đề Thành viên
Khi số máy, shard, pod tăng lên hàng nghìn, lỗi "hiếm" (một node chết, một đĩa hỏng, một replica trễ) thành chuyện hằng ngày, và thao tác tay không còn theo kịp: Stripe có hàng trăm lần shard suy giảm mỗi năm, mỗi lần…
- Failover, replica và dự phòng dữ liệu Chủ đề Thành viên
Mọi hệ có trạng thái đều giữ nhiều bản (replica) để một máy chết không làm mất dịch vụ. Khó không nằm ở việc có bản sao mà ở lúc chuyển sang bản sao:
- Hạ tầng phục vụ LLM inference Chủ đề Thành viên
Phục vụ LLM giống một dịch vụ web ở chỗ cần scale theo tải, deploy phiên bản mới an toàn và phục hồi khi một process chết; nhưng ba đặc điểm làm các công cụ quen thuộc hỏng:
- Migration không downtime Chủ đề Thành viên
Hệ thống đang chạy thật (gọi xe, chat, thiết kế) không được dừng, nhưng phải đổi ngôn ngữ, database hoặc hạ tầng bên dưới.
- Migrating 300+ namespaces from self-hosted Temporal to Temporal Cloud Bài tóm tắt · Coinbase · 2026
…urora → Cloud) gần như chỉ còn là cấu hình. - Chiến lược 1, drain and switch: tắt tạo workflow mới bằng feature flag, chờ workflow cũ chạy xong, đổi cấu hình, bật lại. Đơn giản, dù…
- How We Upgrade Kubernetes on GKE Bài tóm tắt · Gojek · 2020
…e; dùng surge upgrade (tạo node mới, đợi kubelet Ready, rồi drain và cordon node cũ); tắt autoscaling trong lúc nâng. Không nâng nhiều node pool cùng lúc được; không hạ phiên bản n…
- Failing to Auto Scale Elasticsearch in Kubernetes Bài tóm tắt · Zalando · 2024
…việc đang làm để theo trạng thái mới; nhưng vòng retry khi drain node không phản ứng với huỷ context . Bug đã sửa upstream. - Vì sao giờ mới xảy ra: pod chạy trên ephemeral storag…
- Coinbase Công ty Thành viên
Năm 2026, mất một AZ của AWS us-east-1 (hỏng hệ làm lạnh) biến thành khoảng 8 giờ gián đoạn: matching engine Raft dồn trong một placement group mất quorum mà không có failover tự động, còn Kafka managed (MSK) không bầu…
- Using Presto in our Big Data Platform on AWS Bài tóm tắt · Netflix · 2014
…n (hash join phân tán, sort-merge join), và thu nhỏ cụm êm (drain node trước khi tắt) để co cụm ngoài giờ làm việc. Vì sao - Khi dữ liệu nằm ở S3 chứ không trong cụm, thêm một engi…
- Balancing cost and reliability for Spark on Kubernetes Bài tóm tắt · Notion · 2026
…Thử dựa vào cảnh báo hai phút trước khi thu hồi: Karpenter drain node hợp service stateless, không hợp Spark; tính năng decommission của Spark chép dữ liệu đi không kịp với job lớ…
- Stack Overflow Công ty Thành viên
Phản ví dụ nên đọc sớm cho niềm tin "lớn thì phải scale out". Năm 2009, với 16 triệu page view mỗi tháng, Stack Overflow chạy hai web server và một SQL Server, chạm giới hạn thì nâng RAM; theo Jeff Atwood, phần cứng rẻ…
- Stack Overflow: How We Do Monitoring - 2018 Edition Bài tóm tắt · Stack Overflow · 2018
…ng" với "tôi sẵn sàng phục vụ". Web server mới build, đi từ DRAIN (qua health check) mất 8–20 giây để sẵn sàng; đi từ MAINT (traffic dồn vào ngay khi khởi động) mất 2–3 phút vì thr…
- Together AI Công ty Thành viên
Nhà cung cấp hạ tầng chạy model mở. Hai nguồn trong wiki (2026) đều là bài mô tả tính năng của chính họ cho Dedicated Model Inference: autoscaling theo metric của engine, với thí nghiệm cho thấy trên cùng tải chỉ tín…
- Ratequeue: Core Queueing-And-Rate-Limiting System (chaos engineering cho failover) Bài tóm tắt · Twilio · 2017
…vùng mạng), khi bị rút khỏi load balancer nó vào chế độ xả (drain), đẩy item sang shard khoẻ. - Không dùng Redis Sentinel: sau phân vùng mạng, Sentinel xoá dữ liệu của primary cũ đ…
- The data platform cluster operator service for Hadoop cluster management Bài tóm tắt · Twitter · 2023
…ệc vận hành cụm: thêm/bớt host, đáp ứng yêu cầu dung lượng, drain host trước khi gỡ, quản lý vòng đời host, giữ cụm khoẻ. Thay đổi chính - Xây Data Platform Cluster Operator (DCO)…
- Constraint Management for cluster operation safety and reliability at Twitter Bài tóm tắt · Twitter · 2023
…ra, làm trọng tài cuối cùng quyết định thao tác nguy hiểm (drain, reboot, kill/restart shard, thay host) có được chạy không. Nó không tự thực hiện bảo trì; việc đó thuộc một dịch…