Tìm kiếm
40 kết quả cho “deploy giữa sự cố”. Tìm không phân biệt dấu.
- How We Cut Kafka Consumer Deployment Costs by 83% Bài tóm tắt · trivago · 2026
…/tech.trivago.com/post/2026-06-12-how-we-cut-kafka-consumer-deployment-costs-by-83) Bối cảnh - PSE-kafka consume message giá khách sạn từ Kafka và đẩy quảng cáo sang một dịch vụ Ad…
- Sự cố và postmortem Chủ đề Thành viên
Nhiều bước ngoặt kiến trúc trong wiki bắt đầu từ một sự cố: Netflix lên cloud sau 3 ngày không gửi được DVD, Twitter viết lại hệ thống sau World Cup 2010, Instagram đi nhiều data center sau trận bão 2012. Trang này gom…
- Xử lý sự cố và on-call Chủ đề Thành viên
Khi hệ còn nhỏ, vài người biết hết mọi thứ; có lỗi thì người thấy đầu tiên sửa luôn. Khi có hàng trăm service và hàng trăm engineer, câu hỏi đổi khác:
- Open Sourcing Coinbase's Secure Deployment Pipeline (Odin) Bài tóm tắt · Coinbase · 2018
…c](https://blog.coinbase.com/open-sourcing-coinbases-secure-deployment-pipeline-ae6c78e25517) Bài cũ của blog.coinbase.com (Medium), nay redirect sang coinbase.com và chặn crawler;…
- How we built a secure, performant, multi-tenant cloud platform to run untrusted code Bài tóm tắt · Deno · 2024
…ật chỉ liệt kê. Mọi nhận định là theo Deno. Bối cảnh - Deno Deploy là cloud multi-tenant chạy JavaScript/TypeScript trên V8 isolate, phân tán toàn cầu; Subhosting cho doanh nghiệp…
- Deploy và release an toàn Chủ đề Thành viên
Phần lớn sự cố bắt đầu bằng một thay đổi: code mới, cấu hình mới, hạ tầng mới. Khi hệ thống và tổ chức lớn lên, câu hỏi là làm sao đưa thay đổi lên production thường xuyên mà vẫn giới hạn được thiệt hại khi có lỗi.
- From One Horizontal Scaling Controller to Many: Evolving Uber's Compute Platform Bài tóm tắt · Uber · 2026
…khởi động pod mỗi ngày. Up là lớp federation: service owner deploy, khai báo miền lỗi và kỳ vọng scale. CRD UberDeployment mang theo yêu cầu nghiệp vụ, kỳ vọng rollout, ràng buộc c…
- How Reliability and Product Teams Collaborate at Booking.com Bài tóm tắt · Booking.com · 2019
…developer sản phẩm trong lịch trực để họ thấy trọn vòng từ deploy code xấu tới bị gọi dậy. - Mức 1, 2 không "tốt hơn": kèm chuẩn bắt buộc và họp định kỳ, làm chậm tốc độ phát triể…
- How Discord Automates ScyllaDB Clusters at Scale Bài tóm tắt · Discord · 2026
Đội Persistence Infrastructure 7 người vận hành Elasticsearch, Postgres và ScyllaDB; riêng ScyllaDB (tin nhắn, kênh, server, phần lớn dữ liệu user) là hàng chục cụm, hàng trăm node (2026).
- When The Cloud Gets Dark — How Amazon's Outage Affected Airbnb Bài tóm tắt · Airbnb · 2011
…ang master. - Lần thứ ba (11 phút): master treo lại do EBS; deploy code đúng lúc sự cố , process cũ kẹt chờ query không thoát, process mới lên đủ tải, gấp đôi process làm hết RAM,…
- Multi-tenancy và cô lập tenant Chủ đề Thành viên
Một hệ phục vụ nhiều khách (tenant: workspace, shop, organization, account, service nội bộ) trên cùng hạ tầng thì rẻ và dễ vận hành, vì tài nguyên được dùng chung. Cái giá là bốn câu hỏi đi theo hệ suốt đời:
- Disaster Recovery for Databases: High-availability Architecture of PolarDB-X Bài tóm tắt · Alibaba · 2026
Bốn mức rủi ro: process (OOM, segfault; xác suất cao, ảnh hưởng một service) → máy (kernel panic, hỏng đĩa) → data center (mất điện, đứt cáp) → thành phố (động đất, lũ; xác suất rất thấp). Mỗi mức cần một cách bảo vệ…
- Load shedding, rate limit và backpressure Chủ đề Thành viên
Mọi hệ đều có lúc nhận nhiều việc hơn sức làm: spike của người dùng, client nội bộ có bug, dependency chậm đi, retry dồn lại. Theo Discord, khi chạm giới hạn năng lực thì đó là bài toán kinh tế: hoặc tăng cung (thêm…
- Quản lý fleet và migrate code hàng loạt Chủ đề Thành viên
Khi số component (repo, service, pipeline, thư viện) tăng nhanh hơn số kỹ sư, chi phí của mỗi thay đổi xuyên suốt (nâng thư viện, vá bảo mật, đổi API nội bộ, khai tử dataset) tỉ lệ với số component chứ không với độ khó…
- Tách compute khỏi storage Chủ đề Thành viên
Hệ có trạng thái kiểu cổ điển (database, broker Kafka, fileserver Git) đặt dữ liệu bền trên đĩa của chính máy xử lý. Máy đó vừa là compute vừa là storage, nên:
- Deployment At Scale: Dream11's In-House Blue-Green Deployment Platform "OneClick" Bài tóm tắt · Dream11 · 2022
…Trung bình — [bài gốc](https://blog.dream11engineering.com/deployment-at-scale-story-behind-dream11s-in-house-blue-green-deployment-platform-oneclick-b2c761b12896) Phần tiếp theo…
- Deploying Large-scale Fraud Detection Machine Learning Models at PayPal Bài tóm tắt · PayPal · 2021
…người làm model tự đưa model từ model store vào, chọn lịch deploy; có lịch đặt chỗ môi trường shadow cho từng thành viên với thời lượng cấu hình được; cấu hình lấy mẫu traffic từ…
- 1M messages per second: Applying E2EE to Apache Kafka in the LINE app Bài tóm tắt · LINE (LY Corp) · 2026
…zer có header thì giải mã, không có thì đọc như cũ. Thứ tự: deploy consumer trước , rồi mới bật mã hoá ở producer, theo dõi tới khi tỉ lệ plaintext về 0%. - Rollout theo tỉ lệ bằng…
- Migrating millions of lines of code to TypeScript Bài tóm tắt · Stripe · 2022
…ột PR hơn 3,7 triệu dòng . Tuần trước đó: cho build qua CI, deploy lên QA, sửa các công cụ khác cũng đọc source (ESLint, Jest, Webpack, Metro), chỉ sinh .tsx để sửa hàng loạt snaps…
- Improving how we deploy GitHub Bài tóm tắt · GitHub · 2021
…— [bài gốc](https://github.blog/2021-01-25-improving-how-we-deploy-github/) Bối cảnh - Trong một năm, số developer đóng góp vào app GitHub.com tăng gấp đôi , và công cụ deploy cũ k…
- Evolving Reddit's ML Model Deployment and Serving Architecture Bài tóm tắt · Reddit · 2021
…t.com/r/RedditEng/comments/q14tsw/evolving reddits ml model deployment and serving/) Bối cảnh - Hệ ML của Reddit (2021) phục vụ hàng nghìn request inference mỗi giây cho feed, vide…
- The Lego Monolith — A Monolith Microservice Proof of Concept Bài tóm tắt · Slalom Build · 2016
…racing tương quan, circuit breaker, tự hồi phục, continuous deployment và văn hoá DevOps, autoscale từng service, quản trị hợp đồng giữa service. Nhiều tổ chức chưa có các thứ đó.…
- How WhatsApp Grew to Nearly 500 Million Users, 11,000 cores, and 70 Million Messages a Second Bài tóm tắt · WhatsApp · 2014
465 triệu user/tháng; 19 tỉ tin vào và 40 tỉ tin ra mỗi ngày; 600 triệu ảnh, 200 triệu voice, 100 triệu video mỗi ngày.
- Tracing Discord's Elixir Systems (Without Melting Everything) Bài tóm tắt · Discord · 2026
…i không downtime: không thể đổi mọi chỗ gửi một lần, và khi deploy thì node cũ/mới cùng chạy. Có cấu hình runtime để chọn cơ chế cho từng service. - Fan-out làm nổ số span. Head sa…
- How GitHub uses merge queue to ship hundreds of changes every day Bài tóm tắt · GitHub · 2024
…tính năng sản phẩm của họ; số liệu tự đo. Bối cảnh - GitHub deploy trước rồi mới merge . Năm 2016, monorepo lớn đã có gần 1.000 PR merge mỗi tháng, nên họ cần gom nhiều PR deploy c…
- New Tweets per second record, and how! Bài tóm tắt · Twitter · 2013
…đồng loạt trên nhiều service, cho phép theo % traffic. Code deploy ở trạng thái "off" rồi tăng dần. Nó thay cho việc phối hợp deploy giữa các team. Kết quả (2013) Latency p50→p99 g…
- GitLab's unconventional journey to CI/CD and Kubernetes Bài tóm tắt · GitLab · 2019
…làm tay: - đồng bộ nhiều repo; - tạo branch, gắn version; - deploy lên GitLab.com rồi publish package cho bản self-managed. Mỗi lần mất từ nửa ngày tới vài ngày. - Khảo sát 2018: t…
- August 22nd, 2023 Deno Deploy Post-mortem Bài tóm tắt · Deno · 2023
…chỗ. Bối cảnh - deno.com và deno.land chạy trên chính Deno Deploy. deno.land/x (registry module bên thứ ba) và deno.land/std (thư viện chuẩn) cũng do website này phục vụ. Chuyện g…
- Automated testing: 5 lessons from Atlassian's Kubernetes team on testing infrastructure as code Bài tóm tắt · Atlassian · 2020
…năng), từ cụm dev nhỏ tới cụm production rất lớn (2020). - Deploy lên mọi cụm nhiều lần mỗi ngày; một PR đã merge tới hết các cụm dưới 15 phút . Vì thay đổi đổ vào liên tục, team…
- Robinhood Swaps Kafka for WarpStream to Tame Logging Workloads and Costs Bài tóm tắt · WarpStream · 2025
…) và scale xuống chậm (để client kịp rời Agent sắp tắt). Ba deployment, mỗi AZ một cái với HPA riêng, client đi theo AZ để mỗi vùng tự co giãn theo tải của nó. - Batch lớn hơn để g…
- Lessons Learnt From Consolidating ML Models in a Large Scale Recommendation System Bài tóm tắt · Netflix · 2023
…u số chung thấp nhất". Vì sao - Theo Netflix: ít code và ít deploy hơn (mỗi model mới tốn pipeline, nâng framework, sửa lỗi); on-call dễ hơn vì một codebase, ít chuyển ngữ cảnh, ít…
- 2026 World Cup: record traffic, reliability at scale Bài tóm tắt · Meta · 2026
…cầu, họ dự báo đỉnh riêng cho từng vùng. - Không đóng băng deploy: thường sẽ dừng continuous deployment và hoãn các diễn tập DR; lần này các đội ship như bình thường cả lúc đỉnh,…
- Attribute-Based Access Control at Uber Bài tóm tắt · Uber · 2023
…quản trị tập trung ở Charter nên đổi policy không cần build/deploy lại code, và các service không phải tự viết logic phân quyền. Bài học cho SWE - Tách điểm quản trị policy (tập tr…
- Building High Throughput Payment Account Processing Bài tóm tắt · Uber · 2026
…zone làm ID executor) giảm hỏng lô khi một zone sập hay lúc deploy. - Kiểm chứng: shadow traffic production sang hệ mới; kiểm đầy đủ (mọi audit log và giao dịch được ghi, mọi reque…
- Behind the Global Launch: Decoding the Android Engineering Strategy for Our New App Bài tóm tắt · Mercari · 2025
Mercari đã chạy cả ba hướng: app Nhật Jetpack Compose (viết lại khoảng 3 năm trước, hơn 10 triệu lượt tải), Mercari US React Native, Mercari Hallo Flutter. Tiêu chí cho app mới: ra nhanh, đội nhỏ, nền mở rộng được lâu…
- LINE (LY Corp) Công ty Thành viên
Năm 2026 LY Corp thêm mã hoá đầu-cuối giữa producer và consumer cho một topic Kafka tới 1 triệu message/giây: mã hoá từng record qua interceptor, KEK dùng chung để header không phình, consumer hiểu cả hai định dạng…
- Rest.li 2.x and a Protocol Upgrade Story Bài tóm tắt · LinkedIn · 2015
…công bố qua discovery, rollout bằng cấu hình chứ không bằng deploy client. Liên quan - · (hệ A/B dùng để ramp) - · ·…
- ML Model Deployment for Zillow Floor Plans with SageMaker Bài tóm tắt · Zillow · 2020
…— [bài gốc](https://www.zillow.com/tech/sagemaker-ml-model-deployment-floor-plans/) Bối cảnh - Zillow Floor Plan: model phát hiện cửa sổ, cửa ra vào, lối mở trong ảnh panorama của…
- How we built our multi-agent research system Bài tóm tắt · Anthropic · 2025
…ám sát nội dung hội thoại) để biết vì sao agent thất bại. - Deploy: hệ là mạng prompt, công cụ, logic chạy gần như liên tục, agent có thể đang ở bất kỳ bước nào khi deploy; họ dùng…
- Improving Resiliency and Stability of a Large-scale Monolithic API Service Bài tóm tắt · LinkedIn · 2017
…ản; hơn 400 kỹ sư lặp nhanh. - 2017: 500+ triệu thành viên, deploy 3 lần/ngày, gọi gần 300 service phía dưới . Trong một năm có thêm hàng trăm endpoint, user tăng hơn 25%. - Vấn đề…