Tìm kiếm
16 kết quả cho “restart đồng loạt”. Tìm không phân biệt dấu.
- Tự động hoá vận hành và auto-remediation Chủ đề Thành viên
Khi số máy, shard, pod tăng lên hàng nghìn, lỗi "hiếm" (một node chết, một đĩa hỏng, một replica trễ) thành chuyện hằng ngày, và thao tác tay không còn theo kịp: Stripe có hàng trăm lần shard suy giảm mỗi năm, mỗi lần…
- The Consul outage that never happened Bài tóm tắt · GitLab · 2019
…i . Mọi kết nối Consul dùng TLS hai chiều. - Một DB staging restart xong không nối lại được Consul: cert TLS đã hết hạn . Cert là cert tự ký từ bản proof-of-concept một năm trước,…
- Slack's Incident on 2-22-22 Bài tóm tắt · Slack · 2022
…àn fleet theo phần trăm (PBR), mỗi bước cập nhật binary rồi restart agent tuần tự, chậm . Agent tắt thì huỷ đăng ký node khỏi catalog; với node memcached, Mcrib thay bằng node rỗng…
- Deploy và release an toàn Chủ đề Thành viên
Phần lớn sự cố bắt đầu bằng một thay đổi: code mới, cấu hình mới, hạ tầng mới. Khi hệ thống và tổ chức lớn lên, câu hỏi là làm sao đưa thay đổi lên production thường xuyên mà vẫn giới hạn được thiệt hại khi có lỗi.
- Hot partition và thundering herd Chủ đề Thành viên
Chia dữ liệu và tải ra nhiều máy chỉ hiệu quả khi tải chia đều. Thực tế tải lệch: một khách hàng khổng lồ, một kênh có @everyone, một bài của người nổi tiếng. Có hai dạng hay gặp:
- Sự cố và postmortem Chủ đề Thành viên
Nhiều bước ngoặt kiến trúc trong wiki bắt đầu từ một sự cố: Netflix lên cloud sau 3 ngày không gửi được DVD, Twitter viết lại hệ thống sau World Cup 2010, Instagram đi nhiều data center sau trận bão 2012. Trang này gom…
- Nền tảng nội bộ cho service (đường ray chung) Chủ đề Thành viên
Tách hệ thống thành nhiều phần (service, hoặc component trong một monolith) giải được bài toán tổ chức. Nhưng nếu mỗi team tự làm RPC, retry, log, metric, contract theo cách riêng, thì ta chỉ đổi một kiểu hỗn loạn lấy…
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- Migration không downtime Chủ đề Thành viên
Hệ thống đang chạy thật (gọi xe, chat, thiết kế) không được dừng, nhưng phải đổi ngôn ngữ, database hoặc hạ tầng bên dưới.
- Realtime và fan-out Chủ đề Thành viên
Một sự kiện (tin nhắn, ảnh, tweet, vote) phải tới rất nhiều người, rất nhanh, qua rất nhiều kết nối mở cùng lúc.
- How WhatsApp Grew to Nearly 500 Million Users, 11,000 cores, and 70 Million Messages a Second Bài tóm tắt · WhatsApp · 2014
…g cấp kiểu rolling, mọi thứ có dư thừa; hot patch không cần restart là hiếm. - Việc còn treo (2014): nạp lại DB rất lâu và hay lỗi khi dữ liệu lớn; công cụ xem trạng thái và điều k…
- You've Got (Too Much) Mail: Behind the Scenes of the 3/25/26 Voice Outage Bài tóm tắt · Discord · 2026
…ợc và rơi khỏi hash ring (TTL 60 giây). 5. Khôi phục khó: - restart từng instance thì instance khoẻ lại phải gánh phần dư (làm bản phụ cho instance hỏng), nên hàng đợi đầy lại ngay…
- Courier: Dropbox migration to gRPC Bài tóm tắt · Dropbox · 2019
…p nhật qua hệ config phân tán (AFS) trong vài giây mà không restart, nên chủ service shed load nhanh . Identity là khoá chung cho ACL, rate limit, stats. - Observability: stats phí…
- GitLab Công ty Thành viên
GitLab.com (~3 triệu user, 2019) dùng một replica Postgres trễ 8 giờ để khôi phục sau một lần xoá nhầm trong 90 phút . Cùng năm, team Delivery bỏ release tháng có feature freeze và làm continuous delivery ngay trên hạ…
- Orchestrating Cassandra on Kubernetes with Operators Bài tóm tắt · Yelp · 2020
…de/pod chết; phối hợp với operator ở region khác; deploy và restart an toàn; dọn pod lỗi/pending; affinity; cấp TLS. - Pod gồm Cassandra cùng các sidecar: health check cho service…
- How Twitter Uses Redis to Scale - 105TB RAM, 39MM QPS, 10,000+ Instances Bài tóm tắt · Twitter · 2014
…c object. - Logic cluster đặt ở proxy cho phép sửa mà không restart node có state và không phải cập nhật hàng trăm client. - Tính toán gần dữ liệu (tóm tắt log tại máy) trước khi đ…