Tìm kiếm
40 kết quả cho “Incident”. Tìm không phân biệt dấu.
- Incidents, fixes, and the day after Bài tóm tắt · Booking.com · 2017
…ễ — [bài gốc](https://medium.com/booking-com-infrastructure/incidents-fixes-and-the-day-after-c5d9aeae28c3) Bối cảnh - Kỹ sư Booking.com được tự deploy thẳng lên production 24/7. N…
- Incident review: API and Dashboard outage on 10 October 2017 Bài tóm tắt · GoCardless · 2017
…Độ khó: Trung bình — [bài gốc](https://gocardless.com/blog/incident-review-api-and-dashboard-outage-on-10th-october/) Bối cảnh - Dữ liệu quan trọng nhất nằm trên Postgres 3 node :…
- Implementing ChatOps into our Incident Management Procedure Bài tóm tắt · Shopify · 2018
…](https://shopify.engineering/implementing-chatops-into-our-incident-management-procedure) Bối cảnh - Production engineer (PE) của Shopify được coi là chuyên gia xử lý sự cố, nhưng…
- Automated Incident Management Through Slack Bài tóm tắt · Airbnb · 2022
…ộ khó: Dễ — [bài gốc](https://medium.com/airbnb-engineering/incident-management-ae863dc5d47f) Bối cảnh - Airbnb chạy hơn một nghìn microservice do hàng trăm team nhỏ quản lý (2022)…
- Triggered: Incident #1234 (incident process needs fixing) Bài tóm tắt · PayPal · 2021
…hó: Dễ — [bài gốc](https://medium.com/paypal-tech/triggered-incident-1234-incident-process-needs-fixing-2a09dbac9edd) Bài trên blog PayPal Tech, do một Agile Coach kể. Bài không nê…
- Lessons learned in incident management Bài tóm tắt · Dropbox · 2021
…gốc](https://dropbox.tech/infrastructure/lessons-learned-in-incident-management) Bối cảnh - Dropbox cam kết SLA 99,9% với một số khách hàng (khoảng 43 phút down/tháng), mục tiêu nộ…
- How we manage our 1200 incident playbooks Bài tóm tắt · Zalando · 2023
…ngineering.zalando.com/posts/2023/01/how-we-manage-our-1200-incident-playbooks.html) Bối cảnh - Zalando gom playbook sự cố về một chỗ vào 9/2019 , khi chuẩn bị Cyber Week. Đến 2023…
- What we learned from an iOS app OOMs incident Bài tóm tắt · Pinterest · 2021
…/pinterest-engineering/what-we-learned-from-an-ios-app-ooms-incident-eb31eada251) Bối cảnh - Đầu 2020: crash out-of-memory trên app iOS tăng mạnh; tỉ lệ người dùng không gặp crash…
- A deeper dive into our May 2019 security incident Bài tóm tắt · Stack Overflow · 2021
…ow.blog/2021/01/25/a-deeper-dive-into-our-may-2019-security-incident/) Bối cảnh - Ngày 12/5/2019, cộng đồng báo một tài khoản lạ có quyền moderator và developer trên toàn mạng Stac…
- Incident review: Service outage on 25 October 2020 Bài tóm tắt · GoCardless · 2020
…Độ khó: Trung bình — [bài gốc](https://gocardless.com/blog/incident-review-service-outage-on-25-october-2020/) Bối cảnh - GoCardless quản lý secret bằng HashiCorp Vault chạy trên…
- Incident report for September 18, 2026: When Deletion Cascades Exhausted Our Database Connections Bài tóm tắt · Inngest · 2026
…ng bình — [bài gốc](https://www.inngest.com/blog/2026-09-18-incident-report-for-september-18-2026) Bối cảnh - Postgres chính của Inngest giữ dữ liệu quản lý account (account, works…
- Incident Report: March 30th, 2026 — Authenticated user data cached Bài tóm tắt · Railway · 2026
…mô lớn · Độ khó: Dễ — [bài gốc](https://blog.railway.com/p/incident-report-march-30-2026-authenticated-user-data-cached) Bối cảnh - Trên Railway, CDN cache là opt-in : domain khôn…
- Incident Report: July 2, 2026 — US East Services Outage Bài tóm tắt · Railway · 2026
…· Độ khó: Trung bình — [bài gốc](https://blog.railway.com/p/incident-report-july-2-2026-us-east-services-outage) Bối cảnh - Railway tự vận hành datacenter ("Metal"); mỗi site nối v…
- Incident report: Runs list and logs degraded Bài tóm tắt · Trigger.dev · 2026
…y mô lớn · Độ khó: Khó — [bài gốc](https://trigger.dev/blog/incident-report-jun-30-2026) Bối cảnh - Trigger.dev tách hai đường: thực thi run (Postgres là nguồn sự thật + Redis cho…
- Incident report: Vercel environment variables cleared during synchronization Bài tóm tắt · Trigger.dev · 2026
…n · Độ khó: Trung bình — [bài gốc](https://trigger.dev/blog/incident-report-oct-6-2026) Bối cảnh - Trigger.dev đồng bộ biến môi trường từ Vercel trước mỗi lần build. API của Vercel…
- Canva incident report: API Gateway outage Bài tóm tắt · Canva · 2024
…nh — [bài gốc](https://www.canva.dev/blog/engineering/canva-incident-report-api-gateway-outage/) Bối cảnh - Editor của Canva là một SPA, deploy nhiều lần mỗi ngày; mỗi lần có hơn 1…
- Slack's Incident on 2-22-22 Bài tóm tắt · Slack · 2022
…· Độ khó: Khó — [bài gốc](https://slack.engineering/slacks-incident-on-2-22-22/) Postmortem do Incident Commander của sự cố viết. Bối cảnh - Client Slack phải boot (tải danh sách…
- A postmortem of our July 14, 2026 incident Bài tóm tắt · Coinbase · 2026
…ps://www.coinbase.com/blog/a-postmortem-of-our-july-14-2026-incident) Sự cố thứ hai của Coinbase trong năm 2026 có trong wiki; sự cố trước: . Bối cảnh - Một cụm Kubernetes producti…
- How we handled a recent phishing incident that targeted Dropbox Bài tóm tắt · Dropbox · 2022
Đầu 10/2022, nhiều nhân viên nhận email giả làm CircleCI (Dropbox dùng CircleCI cho một số deploy nội bộ, và đăng nhập CircleCI được bằng tài khoản GitHub). Một phần email bị cách ly tự động, phần còn lại vào hộp thư.
- API, ChatGPT & Sora Facing Issues (incident write-up) Bài tóm tắt · OpenAI · 2024
…· Độ khó: Trung bình — [bài gốc](https://status.openai.com/incidents/ctrsv3lwd797/write-up) Chuyện gì đã xảy ra - 11/12/2024, từ 15:16 tới 19:38 (PST), mọi dịch vụ của OpenAI (API…
- Report on our investigation of the 2025-10-20 incident in AWS us-east-1 Bài tóm tắt · PlanetScale · 2025
…cao — [bài gốc](https://planetscale.com/blog/aws-us-east-1-incident-2025-10-20) Bối cảnh - 20/10/2025, AWS us-east-1 gặp sự cố lớn bắt đầu từ cấu hình DNS sai ở một nhà cung cấp.…
- Analysis of recent downtime & what we're doing to prevent future incidents Bài tóm tắt · Asana · 2019
Đa số dữ liệu người dùng của Asana đã shard, nhưng một phần mô hình dữ liệu dùng chung cho mọi team/workspace của user nằm trong một database dùng chung (MySQL trên RDS, cấu hình HA).
- crates.io security incident: improperly stored session cookies Bài tóm tắt · Rust · 2025
Đội crates.io phát hiện giá trị cookie cargosession (giá trị đã ký, định danh user đang đăng nhập, đủ để giả danh user đó) bị gửi kèm payload sự kiện lỗi lên dịch vụ giám sát lỗi Sentry mỗi khi backend gặp lỗi.
- Keeping Customers Streaming — The Centralized Site Reliability Practice at Netflix Bài tóm tắt · Netflix · 2020
…ạm vi, xác định service liên quan, gọi team sở hữu, rồi làm Incident Manager . - Incident Manager làm hoặc giao: điều phối, ra quyết định (ví dụ có sơ tán một region không), ghi ch…
- Three months, 30x demand: How we scaled Google Meet during COVID-19 Bài tóm tắt · Google · 2020
…ngày . - Không có sự cố đang diễn ra, nhưng họ vẫn khai báo incident cho một rủi ro năng lực toàn cầu, trong lúc cả team chuyển sang làm từ xa. Cách tổ chức - Incident Commander, C…
- Open Sourcing Iris and Oncall Bài tóm tắt · LinkedIn · 2017
…chính - Iris (hè 2015): hệ escalation tự động. Ứng dụng tạo incident qua REST API; Iris gửi tin theo escalation plan gồm nhiều bước (gửi song song cho team và người trực, lặp lại c…
- GitHub's Engineering Fundamentals program Bài tóm tắt · GitHub · 2024
…eam, kênh Slack), Code scanning (CodeQL), Secret scanning , Incident readiness (alert tới chủ, có hướng dẫn cho người trực), Accessibility . Một số scorecard dự kiến thành technica…
- Scaling our on-call process Bài tóm tắt · Monzo · 2022
…ản phẩm), làm điểm leo thang cho team. - Thêm vai technical incident manager : nhóm lãnh đạo kỹ thuật được huấn luyện xử lý sự cố lớn, có quan hệ rộng trong tổ chức để thông tin ch…
- Investment Insights from Two Years of AI-Powered Postmortem Analysis Bài tóm tắt · Zalando · 2025
Văn hoá postmortem của Zalando theo sách SRE của Google: team phụ trách làm RCA và hành động phòng ngừa, sự cố chỉ đóng khi lãnh đạo (tới VP Engineering tuỳ mức) ký; bài học đi lên qua họp vận hành hằng tuần.
- How we built Status Page Bài tóm tắt · GitLab · 2020
Sự cố của GitLab.com được xử lý trong issue của một project công khai; người trực tự đăng cập nhật lên status.gitlab.com mỗi 15 phút. Người xử lý mất thời gian đổi công cụ và chép lại thông tin.
- Lessons learned: Using a cybersecurity vendor to check for malicious links Bài tóm tắt · Dropbox · 2023
Dropbox dùng nhà cung cấp bảo mật bên thứ ba để kiểm virus, malware, phishing; một vendor kiểm các URL nhúng trong tài liệu chia sẻ qua Dropbox và tải lên DocSend.
- Data Mesh at Grab (Part III): Operationalizing data reliability with automated DPIs Bài tóm tắt · Grab · 2026
Grab chuyển từ một đội Data Engineering trung tâm sang data mesh: các team tự publish data product, được chứng nhận (chủ sở hữu, tài liệu, lineage, kiểm chất lượng) qua Hubble (metadata, lineage), Genchi (quan sát chất…
- PostgreSQL Stories: A simple query with a big problem Bài tóm tắt · Render · 2024
Tháng 2/2024, pipeline deploy staging của Render bị chặn hàng giờ. Production chỉ được deploy sau khi build đã qua staging, nên tắc staging là tắc luôn production.
- Caching Without Marshal Part 1: Marshal from the Inside Out Bài tóm tắt · Shopify · 2022
Mọi loại cache của Rails (trang, partial, query, low-level) dùng chung read/write trên Rails.cache, và mọi backend (monolith lõi của Shopify dùng Memcached) đều serialize bằng Marshal.dump/Marshal.load. Hướng dẫn Rails…
- How Uber Protects Against Retry Storms Bài tóm tắt · Uber · 2026
Chỉnh cấu hình retry và retry budget giảm được ở mức từng service, nhưng chỉnh tay và không thấy được khuếch đại xuyên service qua chuỗi phụ thuộc sâu và fan-out. Gốc vấn đề: retry không biết ngữ cảnh; kiểm được bao…
- How Upstash Monitors Uptime: Every Replica, Every Minute, From Everywhere Bài tóm tắt · Upstash · 2026
Upstash Redis đa tenant, nhiều zone: mỗi database có ít nhất hai replica; mất một replica thì bầu replica khác (). Theo Upstash, khách báo sự cố trước monitoring thì tính là hai lỗi: sự cố và lỗ hổng giám sát (lỗ hổng…
- Xử lý sự cố và on-call Chủ đề Thành viên
Khi hệ còn nhỏ, vài người biết hết mọi thứ; có lỗi thì người thấy đầu tiên sửa luôn. Khi có hàng trăm service và hàng trăm engineer, câu hỏi đổi khác:
- Sự cố và postmortem Chủ đề Thành viên
Nhiều bước ngoặt kiến trúc trong wiki bắt đầu từ một sự cố: Netflix lên cloud sau 3 ngày không gửi được DVD, Twitter viết lại hệ thống sau World Cup 2010, Instagram đi nhiều data center sau trận bão 2012. Trang này gom…
- Tự động hoá vận hành và auto-remediation Chủ đề Thành viên
Khi số máy, shard, pod tăng lên hàng nghìn, lỗi "hiếm" (một node chết, một đĩa hỏng, một replica trễ) thành chuyện hằng ngày, và thao tác tay không còn theo kịp: Stripe có hàng trăm lần shard suy giảm mỗi năm, mỗi lần…
- Chi phí hạ tầng và build vs buy Chủ đề Thành viên
Khi còn nhỏ, chi phí hạ tầng là chuyện phụ và cloud là lựa chọn hiển nhiên. Khi lớn lên, hoá đơn có thể chiếm phần lớn giá vốn. Hai câu hỏi xuất hiện: tối ưu chi phí trên nền đang có thế nào, và khi nào nên tự xây (hoặc…