Tìm kiếm
7 kết quả cho “break glass plan”. Tìm không phân biệt dấu.
- API, ChatGPT & Sora Facing Issues (incident write-up) Bài tóm tắt · OpenAI · 2024
…t thay đổi xấu để kiểm việc phát hiện và rollback. - Cơ chế break-glass để luôn vào được API server. - Tách data plane khỏi control plane (service discovery không phụ thuộc DNS của…
- The Consul outage that never happened Bài tóm tắt · GitLab · 2019
…Không bàn giao cho ca châu Âu ; thay vào đó viết kế hoạch "break glass" (một MR có đủ thay đổi và hướng dẫn) để nếu sập thật trước khi người đang xử lý thức dậy thì ca sau dựng lạ…
- Fleet Management at Spotify (Part 2): The Path to Declarative Infrastructure Bài tóm tắt · Spotify · 2023
…trong công ty, tìm cái vi phạm chính sách và chủ của nó, có break-glass cho SRE; (3) cấu hình là dữ liệu (YAML/JSON) chứ không phải code (HCL, Starlark, TypeScript), vì sửa dữ liệu…
- Sự cố và postmortem Chủ đề Thành viên
Nhiều bước ngoặt kiến trúc trong wiki bắt đầu từ một sự cố: Netflix lên cloud sau 3 ngày không gửi được DVD, Twitter viết lại hệ thống sau World Cup 2010, Instagram đi nhiều data center sau trận bão 2012. Trang này gom…
- Nền tảng nội bộ cho service (đường ray chung) Chủ đề Thành viên
Tách hệ thống thành nhiều phần (service, hoặc component trong một monolith) giải được bài toán tổ chức. Nhưng nếu mỗi team tự làm RPC, retry, log, metric, contract theo cách riêng, thì ta chỉ đổi một kiểu hỗn loạn lấy…
- Deploy và release an toàn Chủ đề Thành viên
Phần lớn sự cố bắt đầu bằng một thay đổi: code mới, cấu hình mới, hạ tầng mới. Khi hệ thống và tổ chức lớn lên, câu hỏi là làm sao đưa thay đổi lên production thường xuyên mà vẫn giới hạn được thiệt hại khi có lỗi.
- Xử lý sự cố và on-call Chủ đề Thành viên
Khi hệ còn nhỏ, vài người biết hết mọi thứ; có lỗi thì người thấy đầu tiên sửa luôn. Khi có hàng trăm service và hàng trăm engineer, câu hỏi đổi khác: