Tìm kiếm
40 kết quả cho “Work queue”. Tìm không phân biệt dấu.
- Worker Backpressure (Part 1): How we taught our queue workers to slow down Bài tóm tắt · Canva · 2026
…ung bình — [bài gốc](https://www.canva.dev/blog/engineering/worker-backpressure-part-1-how-we-taught-our-queue-workers-to-slow-down/) Phần 1 (vì sao và thiết kế tổng quát). Phần 2…
- How a durable workflow engine works: you might not need a queue Bài tóm tắt · Inngest · 2023
…Cơ bản — [bài gốc](https://www.inngest.com/blog/how-durable-workflow-engines-work) Bài khái niệm của nhà cung cấp workflow engine, có phần quảng bá; mọi nhận định là theo Inngest.…
- How we scaled async workload processing at GitLab.com using Sidekiq Bài tóm tắt · GitLab · 2020
…) xử lý việc nền bằng Sidekiq trên Redis. Lịch sử: 2013 mỗi worker class một queue, không ai quản; 2016 gom theo tính năng; 2017 lại mỗi worker class một queue, gom thành nhóm real…
- Event-driven, message queue và Kafka Chủ đề Thành viên
Khi một hệ có nhiều bên cần biết "có gì vừa xảy ra" (đơn hàng đổi trạng thái, tin đăng được sửa, ticket được cập nhật), gọi đồng bộ từng bên một làm producer phải biết mọi consumer, và một consumer chậm kéo chậm cả…
- Chọn database theo workload Chủ đề Thành viên
Không có database tốt nhất, chỉ có database hợp với mẫu đọc/ghi ở một quy mô cụ thể. Mẫu đó thay đổi khi sản phẩm lớn lên. Ngoài ra, chuyên môn vận hành của đội cũng là một phần của "workload".
- Timestone: Netflix's High-Throughput, Low-Latency Priority Queueing System Bài tóm tắt · Netflix · 2022
…erverless Stratum). Yêu cầu: - Một message chỉ giao cho một worker tại một thời điểm : việc encode rất tốn và fan-out ra hàng nghìn tác vụ; nếu replica trễ cho worker B lấy message…
- Scaling Slack's Job Queue Bài tóm tắt · Slack · 2017
…web app băm ID job chọn host Redis, khử trùng có giới hạn, worker poll Redis, chuyển job sang danh sách đang chạy, lỗi thì sang hàng thử lại. - Sự cố khoảng một năm trước: DB tran…
- October 2024 queue retrospective Bài tóm tắt · Inngest · 2024
…ển queue sang FoundationDB: . Bối cảnh Inngest chạy durable workflow cho khách; lõi là một queue đa tenant có flow control theo key do user đặt. Tháng 10/2024 họ nâng cấp liên tục;…
- Building observability into Notion's dead-letter queue Bài tóm tắt · Notion · 2026
…ndex trang cho search, sinh embedding, đồng bộ lịch, export workspace. Queue phân phối việc sao cho không workspace hay team nào chiếm hết worker. - Task thử hết số lần retry thì v…
- Dynein: Building a Distributed Delayed Job Queueing System Bài tóm tắt · Airbnb · 2019
…giây, ack từng message, dead letter queue, mỗi service một worker pool riêng, huỷ được job. - Hệ cũ: một cụm Resque trung tâm của monolith Rails, chạy trên một instance Redis : at…
- Rearchitecting the Workflows control plane for the agentic era Bài tóm tắt · Cloudflare · 2026
…ô lớn · Độ khó: Khó — [bài gốc](https://blog.cloudflare.com/workflows-v2/) Bài của nhà cung cấp về sản phẩm của chính họ; con số giới hạn là giới hạn sản phẩm, không phải đo tải. B…
- Ratequeue: Core Queueing-And-Rate-Limiting System (chaos engineering cho failover) Bài tóm tắt · Twilio · 2017
…hoá cụm) đọc sự kiện, kiểm tra trạng thái cả cụm , rồi chạy workflow: xác định shard, tìm replica cùng shard, promote, dựng replica mới. - Phát hiện trong khoảng 30 giây , failover…
- Achieving observability in async workflows Bài tóm tắt · Netflix · 2021
…ttps://netflixtechblog.com/achieving-observability-in-async-workflows-cd89b923c784) Đọc toàn văn qua trình duyệt (fetch và Wayback đều lỗi). Bài ngắn, ít chi tiết kỹ thuật về chính…
- How We Made QStash And Upstash Workflow Reliable At Scale Bài tóm tắt · Upstash · 2026
…ó: Trung bình — [bài gốc](https://upstash.com/blog/reliable-workflow) Bài của nhà cung cấp; mọi nhận định là theo Upstash. Không có số liệu. Bối cảnh - QStash (message queue/lịch g…
- Koios: A lightweight workflow service combined with server-driven UI for a better customer experience Bài tóm tắt · Zillow · 2024
…— [bài gốc](https://www.zillow.com/news/koios-a-lightweight-workflow-service-combined-with-server-driven-ui-for-a-better-customer-experience/) Bối cảnh - StreetEasy (thương hiệu củ…
- Beyond synthetic testing: Capturing and replaying real database workloads at Airbnb Bài tóm tắt · Airbnb · 2026
…ond-synthetic-testing-capturing-and-replaying-real-database-workloads-at-airbnb/) Bối cảnh - Fleet MySQL-compatible của Airbnb (2026): hàng trăm cụm , hàng nghìn use case, hàng tri…
- How Upstash Redis Search Works? Bài tóm tắt · Upstash · 2026
…[bài gốc](https://upstash.com/blog/how-upstash-redis-search-works) Bài của nhà cung cấp mô tả nội bộ một tính năng; nhận định là theo Upstash, không có số liệu hiệu năng. Bối cảnh…
- How Discord Supercharges Network Disks for Extreme Low Latency Bài tóm tắt · Discord · 2022
…i gốc](https://discord.com/blog/how-discord-supercharges-network-disks-for-extreme-low-latency) Bối cảnh - Discord chạy các cụm ScyllaDB trên Google Cloud, khoảng 4 tỉ tin nhắn/ngà…
- How recurring network maintenance exposed 6 bugs Bài tóm tắt · Jane Street · 2026
…hó — [bài gốc](https://blog.janestreet.com/how-recurring-network-maintenance-exposed-6-bugs/) Bối cảnh - Jane Street bảo trì mạng nhiều vào cuối tuần; mỗi lần một tủ rack có thể mấ…
- Maximizing Our Publishing Platform Reach with Network Distribution Bài tóm tắt · LinkedIn · 2014
…ishing-platform/maximizing-our-publishing-platform-reach-network-distribution) Bối cảnh - Nền tảng viết bài của LinkedIn phân phối bài tới kết nối cấp 1 và người theo dõi (2014: tá…
- Netflix Conductor: A microservices orchestrator Bài tóm tắt · Netflix · 2016
…trả lời được "phim này còn thiếu bước nào để setup xong". - Workflow khai báo bằng JSON DSL có version (task worker và task điều khiển: fork, join, decision, sub-workflow); task de…
- Infrastructure patterns for agentic applications Bài tóm tắt · Render · 2026
…của nhà cung cấp nền tảng, kết thúc bằng giới thiệu Render Workflows (Beta); không kể sự cố hay số liệu production. Mọi nhận định là theo Render. Bối cảnh - Cách làm agent đầu tiê…
- Meet Bandaid, the Dropbox service proxy Bài tóm tắt · Dropbox · 2018
…àng đợi đầy vì khó phân biệt quá tải với traffic bùng nổ. - Worker pool cố định để khống chế concurrency tới upstream; số worker quá lớn so với số host khoẻ làm mất tác dụng gracef…
- A Lightweight Distributed Architecture to Handle Thousands of Library Releases at eBay Bài tóm tắt · eBay · 2022
…hiều cha hơn (nhiều thứ đang chờ nó) được release trước, để worker không phải ngồi chờ một nút "chặn đường" được bốc ngẫu nhiên sau cùng. - Push mode (cách đầu): service trung tâm…
- The feedback loops behind Kubernetes Bài tóm tắt · PlanetScale · 2026
…tiếp thì cần kho trạng thái mong muốn, watch thay vì poll, work queue, retry, leader election: tức là dựng lại Kubernetes. Cơ chế (theo bài) - Edge-triggered notification, level-t…
- Introducing uForwarder: The Consumer Proxy for Kafka Async Queuing Bài tóm tắt · Uber · 2026
…alance nên consumer service thành stateless. Kích thước mỗi workload (CPU theo request rate, bộ nhớ theo concurrency, mạng theo byte rate) được ước thích ứng theo metric traffic ,…
- Courier: Dropbox migration to gRPC Bài tóm tắt · Dropbox · 2019
…O giới hạn cả kích thước lẫn thời gian chờ giữa listener và workpool; muốn giữ thứ tự thì dùng CoDel. - Hiệu năng: handshake TLS tốn CPU khi restart hàng loạt → đổi RSA 2048 sang E…
- Image Processing at Zillow: Out with the Old and In with the AWS Bài tóm tắt · Zillow · 2015
…nh gốc ghi lên S3, lỗi vào hàng đợi lỗi. - Image Processor (worker Beanstalk, Python PIL): làm sạch ảnh (bỏ viền màu đơn), render trước một bộ kích thước chuẩn lên S3; báo thành cô…
- Robinhood Swaps Kafka for WarpStream to Tame Logging Workloads and Costs Bài tóm tắt · WarpStream · 2025
…m/blog/robinhood-swaps-kafka-for-warpstream-to-tame-logging-workloads-and-costs) Nhà cung cấp viết lại talk của hai engineer Robinhood (Ethan Chen, Renan Rueda) ở Current New Orlea…
- How the controller-runtime Cache Actually Works, and Why Your Controller Does Not Crash the API Server Bài tóm tắt · Kubernetes · 2026
…r không bao giờ thấy store chậm hơn sự kiện của chính nó. - workqueue chỉ giữ key ( namespace/name ), có khử trùng lặp và giới hạn tốc độ: mười thay đổi liên tiếp của một object có…
- DBLog: A Generic Change-Data-Capture Framework Bài tóm tắt · Netflix · 2019
…etflixtechblog.com/dblog-a-generic-change-data-capture-framework-69351fb9099b) Bối cảnh - Nền tảng Delta của Netflix giữ nhiều kho dữ liệu đồng bộ: một kho là nguồn sự thật (MySQL)…
- Centrifuge: a reliable system for delivering billions of events per day Bài tóm tắt · Segment · 2018
…ối tác đang yếu; cần giới hạn. Liên quan - - (cùng năm, gom worker về một service) · - · ·…
- Attack of the Shards: Our Migration to FoundationDB, Part 2 Bài tóm tắt · Inngest · 2026
Inngest (nền tảng durable execution) chuyển queue từ Valkey (bản fork của Redis, chạy trong RAM, thao tác queue đơn luồng) sang FoundationDB (KV có transaction, dữ liệu trên đĩa).
- How we stopped xmin horizon blocking Postgres vacuuming Bài tóm tắt · Trigger.dev · 2024
…tác vụ nội bộ (lịch, email cảnh báo...) chạy bằng Graphile Worker , một job queue trên chính Postgres , tìm job tiếp theo bằng sequential scan (rất nhanh khi bảng dưới khoảng 10.0…
- Load shedding, rate limit và backpressure Chủ đề Thành viên
Mọi hệ đều có lúc nhận nhiều việc hơn sức làm: spike của người dùng, client nội bộ có bug, dependency chậm đi, retry dồn lại. Theo Discord, khi chạm giới hạn năng lực thì đó là bài toán kinh tế: hoặc tăng cung (thêm…
- Executing Cron Scripts Reliably At Scale Bài tóm tắt · Slack · 2023
…job/ngày; Kafka để bền, Redis để giữ metadata ngắn hạn, rồi worker): mỗi script là một job, đặt trên queue riêng nên chạy nhanh; gánh hết CPU và bộ nhớ. - Bảng Vitess thay flock :…
- Our Migration to FoundationDB, Part 1 Bài tóm tắt · Inngest · 2026
Queue của Inngest quyết định job nào chạy tiếp, cho account nào, trên executor nào; mọi lần chạy function đều đi qua nó, và nó phải giữ công bằng giữa các tenant. Hiện chạy nhiều shard queue tách theo bậc giá (free,…
- Scaling LinkedIn's Hadoop YARN cluster beyond 10,000 nodes Bài tóm tắt · LinkedIn · 2021
…hỉ cần 8 máy) và phát lại audit log production, có thể nhân workload 1,5–2 lần. Kết quả: mục tiêu p95 chờ dưới 10 phút giữ được tới khoảng 11.000 node , 12.000 node thì gần 20 phút…
- Zkafka by Zillow: Go Library for Simplifying Kafka Consumption Bài tóm tắt · Zillow · 2024
…bộ hơn 1.500 topic (2024). Team Java có Flink và nhiều framework; team Go, Python, JS tự viết consumer. - Consumer tự viết: dùng compute kém (xử lý từng message một, scale chỉ bằng…
- Maximum Warp: Building Migrations for Slack Enterprise Grid Bài tóm tắt · Slack · 2017
…không cần kỹ sư. - Chạy trên job queue () với queue và pool worker riêng để không ảnh hưởng job khác. Thêm job queue inspector : gắn tag cho task của từng migration, đếm việc còn l…