Tìm kiếm
40 kết quả cho “Kafka client”. Tìm không phân biệt dấu.
- Taking our Ruby & Kafka stack to the next level Bài tóm tắt · Doximity · 2022
…c](https://technology.doximity.com/articles/taking-our-ruby-kafka-stack-to-the-next-level) Bối cảnh - Mọi app Rails ở Doximity nói chuyện với Kafka qua gem nội bộ dox-messaging , v…
- How we built a queue on top of Kafka Bài tóm tắt · Monzo · 2024
…gốc](https://monzo.com/blog/how-we-built-a-queue-on-top-of-kafka) Bối cảnh - Messaging bất đồng bộ có trong kiến trúc microservices của Monzo từ đầu. Ban đầu dùng NSQ : tiện kiểu…
- Kafka on PaaSTA: Running Kafka on Kubernetes at Yelp (Part 2 - Migration) Bài tóm tắt · Yelp · 2022
…g bình — [bài gốc](https://engineeringblog.yelp.com/2022/03/kafka-on-paasta-part-two.html) Phần 2 (migration). Phần 1 (kiến trúc): . Bối cảnh Chuyển các cụm Kafka đang chạy từ EC2…
- Building Scalable Real Time Event Processing with Kafka and Flink Bài tóm tắt · DoorDash · 2022
…022/08/02/building-scalable-real-time-event-processing-with-kafka-and-flink/) Bối cảnh - Event từ service và thiết bị phải tới warehouse OLAP (Snowflake), tới nền tảng ML (feature…
- How to Pitch Apache Kafka Bài tóm tắt · Zillow · 2020
…— [bài gốc](https://www.zillow.com/tech/how-to-pitch-apache-kafka/) Bài quan điểm của một kỹ sư Data Platform về cách thuyết phục lãnh đạo đầu tư Kafka; phần về Zillow là quyết địn…
- Robinhood Swaps Kafka for WarpStream to Tame Logging Workloads and Costs Bài tóm tắt · WarpStream · 2025
…— [bài gốc](https://www.warpstream.com/blog/robinhood-swaps-kafka-for-warpstream-to-tame-logging-workloads-and-costs) Nhà cung cấp viết lại talk của hai engineer Robinhood (Ethan C…
- Automatic Apache Kafka Migrations With Orbit Bài tóm tắt · WarpStream · 2026
…khó: Khó — [bài gốc](https://www.warpstream.com/blog/orbit-kafka-auto-migration) Bài của nhà cung cấp, giới thiệu tính năng sản phẩm (Orbit Auto Migration). Cơ chế được mô tả chi…
- Building Self-driving Kafka clusters using open source components Bài tóm tắt · Slack · 2022
…— [bài gốc](https://slack.engineering/building-self-driving-kafka-clusters-using-open-source-components/) Bối cảnh - Kafka ở Slack là xương sống của Job Queue (), pipeline log, tra…
- Running Kafka At Scale Bài tóm tắt · LinkedIn · 2015
…hó: Trung bình — [bài gốc](https://engineering.linkedin.com/kafka/running-kafka-scale) Bối cảnh - Năm 2015 Kafka chạm gần như mọi server LinkedIn: hơn 800 tỷ message/ngày (175 TB v…
- How We Cut Kafka Consumer Deployment Costs by 83% Bài tóm tắt · trivago · 2026
…ài gốc](https://tech.trivago.com/post/2026-06-12-how-we-cut-kafka-consumer-deployment-costs-by-83) Bối cảnh - PSE-kafka consume message giá khách sạn từ Kafka và đẩy quảng cáo sang…
- Finding Kafka's throughput limit in Dropbox infrastructure Bài tóm tắt · Dropbox · 2019
…ình — [bài gốc](https://dropbox.tech/infrastructure/finding-kafkas-throughput-limit-in-dropbox-infrastructure) Bối cảnh - Kafka ở Dropbox phục vụ analytics, ML, monitoring, search,…
- Scaling StreamHub: Transitioning from Kinesis to Kafka for 145 Billion Daily Events Bài tóm tắt · Atlassian · 2026
…ow-we-build/scaling-streamhub-transitioning-from-kinesis-to-kafka-for-145-billion-daily-events) Bối cảnh - StreamHub là event bus của Atlassian (click, impression, API call, CDC, t…
- 1M messages per second: Applying E2EE to Apache Kafka in the LINE app Bài tóm tắt · LINE (LY Corp) · 2026
…c](https://techblog.lycorp.co.jp/en/applying-e2ee-to-apache-kafka-in-line-app) Wiki chỉ ghi phần liên quan tới vận hành và migration; phần mật mã tóm tắt ngắn. Bối cảnh - Một topic…
- Event-driven, message queue và Kafka Chủ đề Thành viên
Khi một hệ có nhiều bên cần biết "có gì vừa xảy ra" (đơn hàng đổi trạng thái, tin đăng được sửa, ticket được cập nhật), gọi đồng bộ từng bên một làm producer phải biết mọi consumer, và một consumer chậm kéo chậm cả…
- Jepsen: Redpanda 21.10.1 Bài tóm tắt · Jepsen · 2022
…ug. Bối cảnh - Redpanda: hệ streaming tương thích giao thức Kafka, dùng Raft nội bộ thay ZooKeeper, quảng bá "không mất dữ liệu mặc định" vì chỉ ack sau khi fsync trên đa số replic…
- Scaling Slack's Job Queue Bài tóm tắt · Slack · 2017
…ngineer ngại dùng. Thay đổi chính - Thay đổi tối thiểu: đặt Kafka trước Redis thay vì thay Redis bằng Kafka (thay hẳn sẽ phải viết lại logic lập lịch, chạy, khử trùng); interface e…
- Accelerating real-time alerts with Redpanda: a successful migration story Bài tóm tắt · Redpanda · 2023
…gốc](https://www.redpanda.com/blog/equal-experts-migration-kafka-redpanda) Bài khách (Eric Laguer, Equal Experts, một công ty dịch vụ IT) đăng trên blog của nhà cung cấp, kể dự án…
- Anatomy of a serverless usage-based billing system Bài tóm tắt · WarpStream · 2024
…phần đo (metering) phía WarpStream. Bối cảnh - WarpStream (Kafka trên object storage) tính tiền theo ba chiều: cluster minutes (cụm có xử lý request, tính theo khối 15 phút), thro…
- How recurring network maintenance exposed 6 bugs Bài tóm tắt · Jane Street · 2026
…mỗi lần một tủ rack có thể mất kết nối 15–25 phút. Hạ tầng Kafka nội bộ lẽ ra phải chịu được và tự nối lại. Nhiều tháng năm 2026, nó không chịu được: process segfault, rò hàng tră…
- A Brief History of Scaling LinkedIn Bài tóm tắt · LinkedIn · 2015
…Theo LinkedIn, cache nên đặt sát kho dữ liệu nhất có thể. - Kafka: nhiều pipeline riêng (vào data warehouse, vào Hadoop, log, tracking, queue cho InMail, cập nhật search khi đổi pr…
- FollowFeed: LinkedIn's Feed Made Faster and Smarter Bài tóm tắt · LinkedIn · 2016
…p99 mỗi bản ghi cho feed mobile). - Ingest bất đồng bộ qua Kafka: service Partitioner đọc stream mọi nội dung rồi ghi lại sang topic có partition khớp partition của index node; cù…
- 6 Event-Driven Architecture Patterns — Part 1 Bài tóm tắt · Wix · 2020
…/2, tác giả thuộc team data-streams (hạ tầng messaging trên Kafka cho hơn 1.400 microservice, 2020). Phần 2: . Bối cảnh Team data-streams của Wix lo hạ tầng event-driven trên Kafka…
- Scaling Security Insights: how we achieved a 10x increase in global scanning capacity Bài tóm tắt · Cloudflare · 2026
…t, tiến trình crash. - Kiến trúc: scheduler đẩy message vào Kafka → fan-out tới các checker (microservice Go, mỗi loại kiểm một thứ, mỗi loại một consumer group) → checker gửi kết…
- Integrating Neo4j Into Your Stack Bài tóm tắt · Doximity · 2022
…(gem dùng chung chứa mọi query Cypher và test). Ghi đi qua Kafka: callback after commit của ActiveRecord publish message, một service riêng consume rồi upsert vào Neo4j. Neo4j sập…
- Nền tảng nội bộ cho service (đường ray chung) Chủ đề Thành viên
Tách hệ thống thành nhiều phần (service, hoặc component trong một monolith) giải được bài toán tổ chức. Nhưng nếu mỗi team tự làm RPC, retry, log, metric, contract theo cách riêng, thì ta chỉ đổi một kiểu hỗn loạn lấy…
- Our Journey to a Near Perfect Log Pipeline Bài tóm tắt · Salesforce · 2017
…Kiến trúc mới (làm từ cuối 2015): Logstash trên mỗi host → Kafka cục bộ ở mỗi data center (Ajna Local) → MirrorMaker qua WAN → Kafka tổng ở Secure Zone (hàng trăm broker; theo bài…
- Taming the ML Firehose: Scaling Feature Consistency Bài tóm tắt · Uber · 2026
…i feature là khoảng 9,3 GiB/giây , vượt xa năng lực các cụm Kafka hiện có. Client gửi nhiều feature hơn model dùng. Và phần lớn dự đoán không có ích cho train: chấm hàng nghìn ứng…
- Constraint Management for cluster operation safety and reliability at Twitter Bài tóm tắt · Twitter · 2023
…fety-and-reliability-at-twitter) Bối cảnh - Team Messaging (Kafka và PubSub) chạy hàng chục cụm Kafka broker trên hybrid Mesos, mỗi cụm từ vài chục đến vài trăm broker. Dữ liệu rep…
- Authorization at LinkedIn's Scale Bài tóm tắt · LinkedIn · 2019
…oklin báo để xoá cache. - Log mọi lần check bất đồng bộ qua Kafka để debug, phân tích traffic và phục vụ audit; số liệu đẩy lên inGraphs. - Thực thi phân tán, dữ liệu tập trung: AC…
- Geosharded Recommendations Part 3: Consistency Bài tóm tắt · Tinder · 2019
…n nằm ở shard kia. Thay đổi chính - Đảm bảo thứ tự ghi bằng Kafka: - partition theo key: mọi lệnh ghi của cùng document vào cùng partition; - consumer giữ lock trên partition mình…
- The Art of Being Lazy(log): Lower Latency and Higher Availability With Delayed Sequencing Bài tóm tắt · WarpStream · 2026
…phụ thuộc vào control plane) và . Bối cảnh - WarpStream là Kafka tương thích giao thức, dữ liệu chỉ nằm trên object storage ; Agent stateless, không có leader, bất kỳ Agent nào cũ…
- Chaos Testing a Distributed System with Jepsen — Part II Bài tóm tắt · Appian · 2019
…khó là đưa nó vào hạ tầng thật: hệ cần test (SUT) phụ thuộc Kafka và Zookeeper, binary và thư viện nằm trong kho nội bộ có xác thực, và test phải chạy liên tục chứ không chỉ trên m…
- Diving into Uber's cutting-edge data infrastructure Bài tóm tắt · Onehouse · 2024
…aming (dưới một phút, ví dụ cân bằng surge pricing, nối với Kafka); real-time (món phổ biến gần bạn trên Uber Eats, tươi nhanh, tới khoảng 2.000 QPS qua RPC); interactive (báo cáo…
- Service Level Testing for Microservices in Swiggy Bài tóm tắt · Swiggy · 2021
…My-Test-Helper (Go và Java) gom các mẫu lặp: khởi container Kafka một dòng rồi gắn bootstrap server vào cấu hình app, produce message để test consumer; khởi mock gRPC từ định nghĩa…
- How We Improved Website Performance by Evolving Our Infrastructure Bài tóm tắt · Wix · 2021
…ng cache. Dựng giải pháp nội bộ: Varnish để proxy và cache, Kafka để gửi invalidation, một service Scala/Netty sửa HTML và thêm cookie. Thành phần gọn nên triển khai được ở nhiều n…
- Building a Data Streaming Platform Bài tóm tắt · Zillow · 2020
…kém hiệu quả hơn để service ổn định. Hướng tới: chuyển sang Kafka + schema registry, tạo topic bằng CI/CD. - Kết quả: thời gian để một team đưa dữ liệu vào lake từ vài tuần xuống v…
- Timestone: Netflix's High-Throughput, Low-Latency Priority Queueing System Bài tóm tắt · Netflix · 2022
…Redis trả lời, đồng thời trả cho client và phát event sang Kafka; hai job Flink cập nhật index "hiện tại" và "lịch sử" trên Elasticsearch (best-effort, thứ tự theo bộ đếm version…
- Fast and flexible observability with canonical log lines Bài tóm tắt · Stripe · 2019
…ằng Protocol Buffers . API gửi bất đồng bộ bản protobuf vào Kafka; consumer gom lô ghi S3; định kỳ nạp vào Presto và Redshift để phân tích nhiều tháng bằng SQL (ví dụ: tỉ lệ phiên…
- How we improved reporting and monitoring of test automation results Bài tóm tắt · trivago · 2023
…framework test đẩy từng kết quả (từ JSON của Cucumber) lên Kafka, kèm link report; Logstash → Elasticsearch → Kibana, từ một lỗi trên dashboard bấm một lần ra report đầy đủ (bước,…
- No record left behind: How WarpStream can withstand cloud provider regional outages Bài tóm tắt · WarpStream · 2025
…egional-outages) Bài giới thiệu tính năng của nhà cung cấp (Kafka "diskless" trên object storage). Nhận định và con số SLA là "theo WarpStream". Bối cảnh - Cụm thường của WarpStrea…