Tìm kiếm
40 kết quả cho “Production traffic”. Tìm không phân biệt dấu.
- Production testing with dark canaries Bài tóm tắt · LinkedIn · 2020
…bình — [bài gốc](https://engineering.linkedin.com/blog/2020/production-testing-with-dark-canaries) Bối cảnh - Code ở LinkedIn có thể lên production trong vòng một giờ, nhiều lần mỗ…
- Canary rollouts: upgrade models in production without downtime Bài tóm tắt · Together AI · 2026
…ps://www.together.ai/blog/canary-rollouts-upgrade-models-in-production-without-downtime) Bài của nhà cung cấp, mô tả tính năng rollout của nền tảng; mọi nhận định là theo Together…
- 2026 World Cup: record traffic, reliability at scale Bài tóm tắt · Meta · 2026
…rung bình — [bài gốc](https://engineering.fb.com/2026/10/15/production-engineering/2026-world-cup-record-traffic-reliability-at-scale/) Bài tổng kết ngắn, ít chi tiết kỹ thuật; nhậ…
- The Ultimate Load Test Bài tóm tắt · Tinder · 2020
…iêu chịu được 3 lần . Thay đổi chính - Môi trường test 1/30 production (cả Kubernetes lẫn Dynamo), cố ý tắt autoscaler của Dynamo để lộ điểm yếu khi tải nhọn. Thêm khả năng tạo tài…
- Eliminating toil with fully automated load testing Bài tóm tắt · LinkedIn · 2019
…c. - Luôn có nút dừng tay trong quy trình tự động chạy trên production. Liên quan - (khi load test bắt đầu trượt) · (multi-DC, ghim member vào DC) - · ·…
- How Etsy Prepared for Historic Volumes of Holiday Traffic in 2020 Bài tóm tắt · Etsy · 2021
…st toàn site (hệ thống được làm an toàn để test thường khác production), nhưng vẫn tổ chức game day với hơn 15 đội: mỗi đội xin quota GCP trước đầu tháng 9, nâng capacity cho 3 lần…
- How Discord Reduced Websocket Traffic by 40% Bài tóm tắt · Discord · 2024
…le. Thay đổi chính - Dark launch : nén một phần nhỏ traffic production bằng cả zlib lẫn zstandard, ghi metric rồi bỏ dữ liệu zstandard. Tránh phải đợi khoảng một tháng để client cá…
- Scaling Production Globally: Solving observability problems for developers (Part-2) Bài tóm tắt · Achievers · 2022
…rung bình — [bài gốc](https://achievers.engineering/scaling-production-globally-solving-observability-problems-for-developers-part-2-b5416ce5eb8a) Phần 2 của series; phần 1 (servic…
- Scaling Production Globally — The service mesh facelift (Part-1) Bài tóm tắt · Achievers · 2022
…rung bình — [bài gốc](https://achievers.engineering/scaling-production-globally-service-mesh-face-lift-part-1-30ad6d393d04) Site chặn crawler; wiki đọc toàn văn qua trình duyệt, gh…
- How we seamlessly migrated high volume real-time streaming traffic with zero data loss and duplication Bài tóm tắt · Grab · 2024
…êu cầu: chuyển từng stream một; kiểm chứng service mới trên production trước khi chuyển hẳn; không mất, không trùng dữ liệu , không downtime. Thay đổi chính - Loại feature flag (đã…
- Deploying Large-scale Fraud Detection Machine Learning Models at PayPal Bài tóm tắt · PayPal · 2021
…ưa có trong wiki. Bối cảnh - Risk platform là môi trường ML production lớn nhất của PayPal, chống gian lận theo thời gian thực. Vì yêu cầu quản lý (quan trọng, chính xác, công bằng…
- Deploy và release an toàn Chủ đề Thành viên
Phần lớn sự cố bắt đầu bằng một thay đổi: code mới, cấu hình mới, hạ tầng mới. Khi hệ thống và tổ chức lớn lên, câu hỏi là làm sao đưa thay đổi lên production thường xuyên mà vẫn giới hạn được thiệt hại khi có lỗi.
- The WhatsApp Architecture Facebook Bought For $19 Billion Bài tóm tắt · WhatsApp · 2014
…thật theo nước, theo thiết bị, theo sự kiện). Họ rẽ traffic production sang hệ riêng cho phần không có tác dụng phụ, rồi dùng chính tải production (đưa một máy vào DNS vài lần để n…
- A deeper dive into our May 2019 security incident Bài tóm tắt · Stack Overflow · 2021
…ời dùng để che audit log, rồi chạy một SQL migration lên DB production để nâng quyền trên toàn mạng; xoá build để phi tang (Stack Overflow khôi phục được nhờ "thùng rác" cấu hình).…
- The Enterprise Multi-Active Disaster Recovery System Bài tóm tắt · Alibaba · 2021
…không dám chuyển sang : bản cold backup lệch phiên bản với production, và sợ chuyển đi rồi không chuyển về được. - DR 2.0: tính tới ứng dụng: active-active trong cùng vùng (khoảng…
- How we rebuilt Next.js with AI in one week Bài tóm tắt · Cloudflare · 2026
…nhỏ hơn khoảng 57%. Một site chính phủ (CIO.gov) đã chạy ở production. - Theo Cloudflare, việc này khả thi vì bốn điều cùng đúng: API mục tiêu được tài liệu hoá kỹ, có test suite…
- How we built our multi-agent research system Bài tóm tắt · Anthropic · 2025
…bỏ sót (agent ưa trang SEO hơn nguồn học thuật). Vận hành ở production - Agent có trạng thái và lỗi cộng dồn: chạy lâu qua nhiều lần gọi công cụ; khởi động lại từ đầu thì tốn kém v…
- Achieving observability in async workflows Bài tóm tắt · Netflix · 2021
…ải rác không nối được với nhau, có lúc phải viết SQL vào DB production lúc nửa đêm. Thay đổi chính - Khi chuyển workflow sang Java, yêu cầu: gần realtime, có bộ điều phối workflow…
- Building High Throughput Payment Account Processing Bài tóm tắt · Uber · 2026
…00 byte vẫn đủ đảm bảo idempotency (phát hiện từ thử nghiệm production). - Chịu lỗi: lỗi của từng thao tác được cô lập; Redis sập thì tạm không phục vụ nhưng không hỏng dữ liệu; au…
- How We Built a Logging Stack at Grab Bài tóm tắt · Grab · 2019
…1 GB index memory, tương đương bỏ 8 node. Đổi analyzer trên production làm user bối rối vì kết quả đổi. - Phí traffic giữa AZ: chuyển shard nóng → ấm → lạnh liên tục giữa các AZ ch…
- Rethinking site capacity projections with Capacity Analyzer Bài tóm tắt · LinkedIn · 2021
…city-analyzer) Bối cảnh - LinkedIn load test hằng ngày trên production bằng cách dồn traffic của các DC khác vào DC cần test; mục tiêu đặt theo dự báo QPS của quý. - Vài năm trước…
- Load test và kiểm chứng capacity Chủ đề Thành viên
Trước một mốc tải chưa từng gặp (ra mắt game, tính năng mới gửi push toàn quốc, mùa giải, tăng trưởng nhanh), cần biết hệ chịu được bao nhiêu, cái gì gãy trước, và cần bao nhiêu máy. Test từng service riêng không đủ vì…
- Embedded SRE at Mercari Bài tóm tắt · Mercari · 2022
…m tự đi hết vòng đời phát triển) và SRE (thực hành vận hành production: response, observability, availability, delivery). SRE đứng giữa, là khách hàng của team Platform: Platform g…
- Engineering the agentic SDLC Bài tóm tắt · Optiver · 2026
…ffic đã bắt, kịch bản end-to-end trên môi trường không phải production cho kết quả đạt/không đạt, framework kiểm sản phẩm từng pha bằng code. Agent tự do ở phần sáng tạo (giao thức…
- Slack's Outage on January 4th 2021 Bài tóm tắt · Slack · 2021
…hưa từng qua. - Monitoring phải độc lập khỏi đường mạng của production; phụ thuộc ẩn qua thành phần mạng dùng chung chỉ lộ ra khi cần nó nhất. - Mẫu traffic theo mùa (sau kỳ nghỉ)…
- Scaling your API with rate limiters Bài tóm tắt · Stripe · 2017
…h - Thêm capacity chỉ đỡ được mấy lần tăng traffic đầu; API production còn phải chống một người dùng (vô tình hay cố ý) làm ảnh hưởng mọi người, ưu tiên request quan trọng hơn requ…
- Scaling up your microservice testing with Apache Spark Bài tóm tắt · Stripe · 2026
…diff. - Ba cách dùng: - Regression test: chạy song song bản production và bản ứng viên trên đầu vào lịch sử, so kết quả: bao nhiêu giao dịch đổi phí, luật nào gây ra, đổi ở interch…
- Meet Bandaid, the Dropbox service proxy Bài tóm tắt · Dropbox · 2018
…(100.000 request, 100 worker, 10 backend) trước khi đưa lên production; loại host đã thử khi retry giảm tỉ lệ lỗi với 20% host hỏng (trừ pinning peer). Vì sao - Theo Dropbox, quản…
- Kiểm thử độ tin cậy (chaos, fault injection, mô phỏng tất định) Chủ đề Thành viên
Lỗi trong hệ phân tán là chắc chắn (máy chết, zone mất, dependency chậm, cấu hình sai), nhưng phần lớn lỗi nằm ở những tổ hợp hiếm mà test chức năng không chạm tới. Bài toán là chủ động gây lỗi để biết hệ thống phản ứng…
- Migration không downtime Chủ đề Thành viên
Hệ thống đang chạy thật (gọi xe, chat, thiết kế) không được dừng, nhưng phải đổi ngôn ngữ, database hoặc hạ tầng bên dưới.
- Độ tin cậy và multi-region Chủ đề Thành viên
Thay đổi kiến trúc lớn thường không đến từ kế hoạch mà từ một sự cố đau đớn. Khi đã chạy nhiều vùng, nhiều giả định của hệ thống một vùng không còn đúng.
- Load shedding, rate limit và backpressure Chủ đề Thành viên
Mọi hệ đều có lúc nhận nhiều việc hơn sức làm: spike của người dùng, client nội bộ có bug, dependency chậm đi, retry dồn lại. Theo Discord, khi chạm giới hạn năng lực thì đó là bài toán kinh tế: hoặc tăng cung (thêm…
- Nền tảng ML (feature, training, serving, giám sát model) Chủ đề Thành viên
Model ML đầu tiên của một công ty thường được nhúng thẳng vào một service có sẵn, với feature tính trong vài script và train bằng một job riêng. Khi số model và số người làm model tăng, bốn chỗ cùng hỏng:
- Observability và monitoring Chủ đề Thành viên
Lúc đầu, monitoring là vài dashboard và một công cụ cài sẵn; log đọc thẳng từ máy. Khi hệ lớn lên, chính hệ quan sát thành một hệ phân tán có bài toán riêng:
- Hạ tầng phục vụ LLM inference Chủ đề Thành viên
Phục vụ LLM giống một dịch vụ web ở chỗ cần scale theo tải, deploy phiên bản mới an toàn và phục hồi khi một process chết; nhưng ba đặc điểm làm các công cụ quen thuộc hỏng:
- Đổi ngôn ngữ và runtime Chủ đề Thành viên
Ngôn ngữ ban đầu được chọn để làm nhanh. Khi lớn lên, nó có thể thành nút thắt về hiệu năng, latency, hoặc tổ chức code. Có ba hướng: tối ưu runtime đang dùng, cải tiến dần, hoặc viết lại có phạm vi.
- Sự cố và postmortem Chủ đề Thành viên
Nhiều bước ngoặt kiến trúc trong wiki bắt đầu từ một sự cố: Netflix lên cloud sau 3 ngày không gửi được DVD, Twitter viết lại hệ thống sau World Cup 2010, Instagram đi nhiều data center sau trận bão 2012. Trang này gom…
- Tự động hoá vận hành và auto-remediation Chủ đề Thành viên
Khi số máy, shard, pod tăng lên hàng nghìn, lỗi "hiếm" (một node chết, một đĩa hỏng, một replica trễ) thành chuyện hằng ngày, và thao tác tay không còn theo kịp: Stripe có hàng trăm lần shard suy giảm mỗi năm, mỗi lần…
- Bảo mật hạ tầng và quản lý secret Chủ đề Thành viên
Khi hệ thống lớn lên, số credential (mật khẩu DB, API key, SSH key, token, cookie phiên) tăng theo số service, pipeline, nhà cung cấp, và chúng rải vào code, cấu hình, hệ build, log. Các nguồn trong wiki cho thấy kẻ tấn…
- CI và build ở quy mô lớn Chủ đề Thành viên
Lúc nhỏ, CI là "mỗi commit chạy hết build và test". Khi codebase và số commit tăng, chạy hết trở thành bất khả (Stripe 2026: chạy tuần tự mất bốn tháng), và thời gian chờ của một thay đổi không còn chỉ là thời gian…