Tìm kiếm
40 kết quả cho “crash OS”. Tìm không phân biệt dấu.
- Chaos Testing a Distributed System with Jepsen — Part II Bài tóm tắt · Appian · 2019
…est chạy hết và phát hiện vi phạm linearizability); nemesis crash, hết bộ nhớ hay không có file kết quả → FAILURE (kết quả không đáng tin, phải chạy lại). Lý do: nemesis chết giữa…
- What we learned from an iOS app OOMs incident Bài tóm tắt · Pinterest · 2021
…-an-ios-app-ooms-incident-eb31eada251) Bối cảnh - Đầu 2020: crash out-of-memory trên app iOS tăng mạnh; tỉ lệ người dùng không gặp crash (CFUR) giảm từ 99% xuống 96% . - App gọi RE…
- Sự cố và postmortem Chủ đề Thành viên
Nhiều bước ngoặt kiến trúc trong wiki bắt đầu từ một sự cố: Netflix lên cloud sau 3 ngày không gửi được DVD, Twitter viết lại hệ thống sau World Cup 2010, Instagram đi nhiều data center sau trận bão 2012. Trang này gom…
- Monolith và microservices — đi và quay lại Chủ đề Thành viên
Lúc nào nên tách hệ thống thành nhiều service, và cái giá của việc đó là gì? Các nguồn hiện có cho thấy đây không phải đường một chiều.
- The Real Cost of a Single Insert in Postgres Bài tóm tắt · Tiger Data · 2026
…checkpoint timeout (ít checkpoint hơn, đổi lại phục hồi sau crash lâu hơn). Vì sao - Theo Tiger Data, write amplification là cơ chế nằm dưới phần lớn các "trần ingest": workload tr…
- Better Crash-safe replication for MySQL Bài tóm tắt · Booking.com · 2014
…i gốc](https://medium.com/booking-com-infrastructure/better-crash-safe-replication-for-mysql-a336a69b317f) Bối cảnh - Booking.com (2014) dùng replication MySQL để scale đọc , với h…
- Working with PostgreSQL Bài tóm tắt · Zerodha · 2021
…ông chịu nổi (đã thấy dấu hiệu); DB quá lớn để hồi phục sau crash/restart; dữ liệu năm cũ ít dùng vẫn chiếm tài nguyên như dữ liệu nóng. - "97,42%" vấn đề RDBMS là do index và vacu…
- Goodbye Microservices: From 100s of problem children to 1 superstar Bài tóm tắt · Segment · 2018
…n nhỏ. Đánh đổi (Segment tự nêu) 1. Mất cô lập lỗi: một bug crash service là crash mọi destination. Lúc viết bài họ dựa vào test tự động và đang làm một cơ chế chống lại việc này,…
- Geosharded Recommendations Part 3: Consistency Bài tóm tắt · Tinder · 2019
…bộ thì ít lo latency và có checkpoint để chạy tiếp sau khi crash; ghi đồng bộ trong request thì client phải tự retry; - refeed index tìm kiếm từ kho nguồn sự thật: ngay khi phát h…
- Retrospective and Technical Details on the recent Firefox Outage Bài tóm tắt · Mozilla · 2022
…fox gọi nhiều service nội bộ (update, telemetry, chứng chỉ, crash report) đặt sau load balancer của nhiều cloud. Trên GCP, load balancer có cài đặt HTTP/3 ba trạng thái; Mozilla để…
- Announcing High Availability for Render PostgreSQL Bài tóm tắt · Render · 2024
…phần lớn nguyên nhân downtime (node chết, process Postgres crash); PITR lo phần còn lại (lỗi dữ liệu, xoá nhầm). Bài học cho SWE - Replication bất đồng bộ nghĩa là failover có thể…
- Kiểm thử độ tin cậy (chaos, fault injection, mô phỏng tất định) Chủ đề Thành viên
Lỗi trong hệ phân tán là chắc chắn (máy chết, zone mất, dependency chậm, cấu hình sai), nhưng phần lớn lỗi nằm ở những tổ hợp hiếm mà test chức năng không chạm tới. Bài toán là chủ động gây lỗi để biết hệ thống phản ứng…
- Jepsen: NATS 2.12.1 Bài tóm tắt · Jepsen · 2025
…trong hai có thể đúng. Thay đổi chính (kết quả) - 2.10.22: crash process có thể làm JetStream quên luôn stream (NATS tự tìm ra, sửa ở 2.10.23, 12/2024). - 2.12.1: không mất dữ liệ…
- How recurring network maintenance exposed 6 bugs Bài tóm tắt · Jane Street · 2026
…một thread; bản vá đã lên upstream glibc 2.44. Cùng chữ ký crash đã làm sập hệ giao dịch, job nghiên cứu, cả Chrome trong nhiều năm. 2. Thư viện socket: bind UDP thất bại (hết eph…
- Incident review: API and Dashboard outage on 10 October 2017 Bài tóm tắt · GoCardless · 2017
…mary" (đang nằm ở đúng replica cần promote); 3. hai process crash gần như cùng lúc (Postgres trên primary và một tiến trình con trên replica đồng bộ). - Cách sửa bất ngờ: viết luật…
- From Native to React Native to Flutter Bài tóm tắt · Zerodha · 2022
…cache mỗi lần mở); nạp thư viện native trực tiếp từ APK làm crash trên một số máy Mi Android 6 nên phải tắt; sinh trắc học, màn hình 90 Hz, HTTP/2 phải tự viết plugin (plugin HTTP…
- Incident report for September 18, 2026: When Deletion Cascades Exhausted Our Database Connections Bài tóm tắt · Inngest · 2026
…uan: lập lịch run giảm, event không được ack, nhiều service crash-loop vì không nối được DB lúc khởi động. - 16:26 restart PgBouncer: pool lại đầy ngay vì transaction chặn vẫn chạy…
- Jepsen: MySQL 8.0.34 Bài tóm tắt · Jepsen · 2023
…repeatable read, monotonic atomic view; lỗi giả lập: pause, crash, partition, mất dữ liệu chưa fsync (LazyFS). Thay đổi chính (kết quả) - Repeatable Read cho phép G2-item (write sk…
- Scaling Production Globally — The service mesh facelift (Part-1) Bài tóm tắt · Achievers · 2022
…i ra ngoài lúc khởi động trước khi istio-proxy sẵn sàng nên crash ngẫu nhiên; Kubernetes không bảo đảm thứ tự container. Sửa bằng holdApplicationUntilProxyStarts . - Autoscaling lệ…
- Scaling Security Insights: how we achieved a 10x increase in global scanning capacity Bài tóm tắt · Cloudflare · 2026
…ng triệu event tồn đọng, API nội bộ hay timeout, tiến trình crash. - Kiến trúc: scheduler đẩy message vào Kafka → fan-out tới các checker (microservice Go, mỗi loại kiểm một thứ, m…
- Failing to Auto Scale Elasticsearch in Kubernetes Bài tóm tắt · Zalando · 2024
…ều: thêm if cho trường hợp huỷ không đủ, vì operator có thể crash giữa chừng (lỗi một phần). PR còn dở; họ tạm chấp nhận xử lý tay. 3. Ngày 3: cảnh báo lần nữa, vì bản sửa tạm chỉ…
- How we systematically improved our reliability Bài tóm tắt · Neon · 2026
…70 môi trường (2026). Ở quy mô hàng triệu database, process crash, máy chết, mạng chập chờn là chuyện hằng ngày. - Control plane (tạo, cấu hình, theo dõi, phục hồi DB, HA, branch,…
- How We Made QStash And Upstash Workflow Reliable At Scale Bài tóm tắt · Upstash · 2026
…, process tiến tới OOM nhanh hơn tốc độ thêm máy, rồi thành crash loop. - Một goroutine theo dõi heap; vượt ngưỡng (theo memory limit của máy, chừa phần cho socket buffer, file cac…
- Incidents, fixes, and the day after Bài tóm tắt · Booking.com · 2017
Kỹ sư Booking.com được tự deploy thẳng lên production 24/7. Năm 2012 bộ phận còn nhỏ, vài trang wiki là đủ; đến 2017 bộ phận có gần 2.000 người trên toàn cầu, nên làm lại hướng dẫn xử lý sự cố.
- Getting from tested to battle-tested Bài tóm tắt · Jane Street · 2025
…hử. - Gỡ bằng debugger của Antithesis: tua lại 1 giây trước crash, chạy tcpdump trong VM, đọc offset yêu cầu (313425) và offset snapshot (315567) bằng chính lệnh admin của Aria. Vì…
- The feedback loops behind Kubernetes Bài tóm tắt · PlanetScale · 2026
…ố ý làm khó việc viết logic theo sự kiện. Vì vậy controller crash 10 phút rồi chạy lại vẫn hội tụ, không cần code phục hồi. - spec và status là setpoint và giá trị đo. Status ghi c…
- Three Basecamp outages. One week. What happened? Bài tóm tắt · Basecamp · 2020
…DC lại mất; trong lúc khôi phục một hardware load balancer crash, bản standby nhận ngay nhưng router không tự đồng bộ với LB mới, phải can thiệp tay. - 2/9 (15 phút): LB primary ở…
- How to debug large db size issue? Bài tóm tắt · etcd (CNCF) · 2023
…mọi bản 3.5 (3.5.0–3.5.5) có thể mất nhất quán dữ liệu nếu crash giữa lúc defrag online (qua etcdctl hoặc client API). Khuyến nghị defrag offline bằng etcdutl : dừng từng member,…
- How WarpStream Powers Grafana Labs' Redesigned Architecture Bài tóm tắt · WarpStream · 2025
…persistent volume; mỗi điểm dữ liệu replicate ra 3 volume, crash thì nạp snapshot rồi replay WAL. - Hai đánh đổi của thiết kế đó: 1. Ingester tham gia cả đường ghi lẫn đường đọc,…
- Save Money with EMR Auto Scaling and Spot Instances Bài tóm tắt · Zillow · 2017
…node đang giữ shuffle output của Spark trên đĩa cục bộ, job crash; đổi sang terminate khi task xong . - Hạn chế: thêm node Spot mất 10–25 phút , job có thể chờ. Vì sao - Dữ liệu nằ…
- How AI Agents Halved the Effort of Migrating 500 Gradle Modules from Koin to Hilt Bài tóm tắt · Allegro · 2026
…phụ: thiếu module hay khai báo sai thành lỗi build thay vì crash ở máy người dùng. Cái giá: build chậm hơn vì annotation processing, chấp nhận được. - Migrate từng module, giữ tươ…
- Scaling our Observability platform beyond 100 Petabytes by embracing wide events and replacing OTel Bài tóm tắt · ClickHouse · 2025
…ng để query, còn OTel đọc stdout/stderr được cả khi service crash-loop. Nhưng chỉ thu info trở lên (bỏ trace-level), nên pipeline OTel nhỏ lại. - Chuyển hướng sang wide event, high…
- Jepsen: Redpanda 21.10.1 Bài tóm tắt · Jepsen · 2022
…10 vấn đề (7 an toàn, 3 liveness) trong 21.10.1 → 21.11.2: crash, ghi trùng ngay với cấu hình mặc định (client Java bật idempotence nhưng Redpanda chưa bật phía server), poll khôn…
- On-Device Stitching with Zillow 3D Home Bài tóm tắt · Zillow · 2020
…cho ngân sách bộ nhớ (vài trăm MB, quá khoảng 600 MB là gặp crash). - Pipeline nhiều tầng: chọn một frame tốt nhất cho mỗi 1/540 vòng; chỉ giữ dải dọc ở giữa (frame đầu, cuối và fr…
- Observability và monitoring Chủ đề Thành viên
Lúc đầu, monitoring là vài dashboard và một công cụ cài sẵn; log đọc thẳng từ máy. Khi hệ lớn lên, chính hệ quan sát thành một hệ phân tán có bài toán riêng:
- Tự động hoá vận hành và auto-remediation Chủ đề Thành viên
Khi số máy, shard, pod tăng lên hàng nghìn, lỗi "hiếm" (một node chết, một đĩa hỏng, một replica trễ) thành chuyện hằng ngày, và thao tác tay không còn theo kịp: Stripe có hàng trăm lần shard suy giảm mỗi năm, mỗi lần…
- Failover, replica và dự phòng dữ liệu Chủ đề Thành viên
Mọi hệ có trạng thái đều giữ nhiều bản (replica) để một máy chết không làm mất dịch vụ. Khó không nằm ở việc có bản sao mà ở lúc chuyển sang bản sao:
- Event-driven, message queue và Kafka Chủ đề Thành viên
Khi một hệ có nhiều bên cần biết "có gì vừa xảy ra" (đơn hàng đổi trạng thái, tin đăng được sửa, ticket được cập nhật), gọi đồng bộ từng bên một làm producer phải biết mọi consumer, và một consumer chậm kéo chậm cả…
- Hạ tầng tìm kiếm Chủ đề Thành viên
Lúc đầu, tìm kiếm là LIKE trên database hoặc một thư viện (Lucene) nhúng trong app. Khi dữ liệu và tính năng tăng, search thành một hệ có trạng thái riêng, khác database ở mấy điểm:
- Hot partition và thundering herd Chủ đề Thành viên
Chia dữ liệu và tải ra nhiều máy chỉ hiệu quả khi tải chia đều. Thực tế tải lệch: một khách hàng khổng lồ, một kênh có @everyone, một bài của người nổi tiếng. Có hai dạng hay gặp: