Tìm kiếm
40 kết quả cho “Kafka topic”. Tìm không phân biệt dấu.
- Zkafka by Zillow: Go Library for Simplifying Kafka Consumption Bài tóm tắt · Zillow · 2024
…lớn · Độ khó: Khó — [bài gốc](https://www.zillow.com/news/zkafka-by-zillow-go-library-for-simplifying-kafka-consumption/) Bối cảnh - Năm năm qua Kafka dùng rộng ở Zillow: cụm nội…
- Taking our Ruby & Kafka stack to the next level Bài tóm tắt · Doximity · 2022
…c](https://technology.doximity.com/articles/taking-our-ruby-kafka-stack-to-the-next-level) Bối cảnh - Mọi app Rails ở Doximity nói chuyện với Kafka qua gem nội bộ dox-messaging , v…
- How to Pitch Apache Kafka Bài tóm tắt · Zillow · 2020
…— [bài gốc](https://www.zillow.com/tech/how-to-pitch-apache-kafka/) Bài quan điểm của một kỹ sư Data Platform về cách thuyết phục lãnh đạo đầu tư Kafka; phần về Zillow là quyết địn…
- Automatic Apache Kafka Migrations With Orbit Bài tóm tắt · WarpStream · 2026
…khó: Khó — [bài gốc](https://www.warpstream.com/blog/orbit-kafka-auto-migration) Bài của nhà cung cấp, giới thiệu tính năng sản phẩm (Orbit Auto Migration). Cơ chế được mô tả chi…
- Building Self-driving Kafka clusters using open source components Bài tóm tắt · Slack · 2022
…— [bài gốc](https://slack.engineering/building-self-driving-kafka-clusters-using-open-source-components/) Bối cảnh - Kafka ở Slack là xương sống của Job Queue (), pipeline log, tra…
- Resiliency and Disaster Recovery with Kafka Bài tóm tắt · eBay · 2020
…ayinc.com/engineering/resiliency-and-disaster-recovery-with-kafka/) Bối cảnh - Team Motors Vertical (eBay Classifieds Group) chạy phần mềm ở nhiều region , định kỳ diễn tập tắt cả…
- Real-Time Data Lake Ingestion Is Saying Goodbye to ETL: Architectural Subtraction from Kafka to Iceberg Bài tóm tắt · Alibaba · 2026
…ion-is-saying-goodbye-to-etl-architectural-subtraction-from-kafka-to-iceberg 603582) Bài của team Messaging của Alibaba Cloud, quảng bá tính năng ApsaraMQ for Kafka × OSS Tables (đ…
- Running Kafka At Scale Bài tóm tắt · LinkedIn · 2015
…hó: Trung bình — [bài gốc](https://engineering.linkedin.com/kafka/running-kafka-scale) Bối cảnh - Năm 2015 Kafka chạm gần như mọi server LinkedIn: hơn 800 tỷ message/ngày (175 TB v…
- From Always-On to On-Demand: Scaling Kafka Sinks with KEDA Bài tóm tắt · trivago · 2026
…ago.com/post/2026-02-18-from-always-on-to-on-demand-scaling-kafka-sinks-with-keda) Bối cảnh - trivago dùng Kafka làm lớp vận chuyển dữ liệu giữa các hệ. Nhiều dữ liệu vào Kafka từ…
- How we built a queue on top of Kafka Bài tóm tắt · Monzo · 2024
…gốc](https://monzo.com/blog/how-we-built-a-queue-on-top-of-kafka) Bối cảnh - Messaging bất đồng bộ có trong kiến trúc microservices của Monzo từ đầu. Ban đầu dùng NSQ : tiện kiểu…
- Event-driven, message queue và Kafka Chủ đề Thành viên
Khi một hệ có nhiều bên cần biết "có gì vừa xảy ra" (đơn hàng đổi trạng thái, tin đăng được sửa, ticket được cập nhật), gọi đồng bộ từng bên một làm producer phải biết mọi consumer, và một consumer chậm kéo chậm cả…
- Introducing uForwarder: The Consumer Proxy for Kafka Async Queuing Bài tóm tắt · Uber · 2026
…/www.uber.com/us/en/blog/introducing-ufowarder/) Bối cảnh - Kafka ở Uber xử lý hàng nghìn tỉ message và nhiều PB mỗi ngày. Khoảng ba năm trước bài, Uber dựng Consumer Proxy : một c…
- Finding Kafka's throughput limit in Dropbox infrastructure Bài tóm tắt · Dropbox · 2019
…ình — [bài gốc](https://dropbox.tech/infrastructure/finding-kafkas-throughput-limit-in-dropbox-infrastructure) Bối cảnh - Kafka ở Dropbox phục vụ analytics, ML, monitoring, search,…
- Scaling StreamHub: Transitioning from Kinesis to Kafka for 145 Billion Daily Events Bài tóm tắt · Atlassian · 2026
…ow-we-build/scaling-streamhub-transitioning-from-kinesis-to-kafka-for-145-billion-daily-events) Bối cảnh - StreamHub là event bus của Atlassian (click, impression, API call, CDC, t…
- 1M messages per second: Applying E2EE to Apache Kafka in the LINE app Bài tóm tắt · LINE (LY Corp) · 2026
…c](https://techblog.lycorp.co.jp/en/applying-e2ee-to-apache-kafka-in-line-app) Wiki chỉ ghi phần liên quan tới vận hành và migration; phần mật mã tóm tắt ngắn. Bối cảnh - Một topic…
- 6 Event-Driven Architecture Patterns — Part 1 Bài tóm tắt · Wix · 2020
…/2, tác giả thuộc team data-streams (hạ tầng messaging trên Kafka cho hơn 1.400 microservice, 2020). Phần 2: . Bối cảnh Team data-streams của Wix lo hạ tầng event-driven trên Kafka…
- 6 Event-Driven Architecture Patterns — Part 2 Bài tóm tắt · Wix · 2020
…Phần 1: . Bối cảnh Ba mẫu tiếp theo của team data-streams (Kafka cho hơn 1.400 microservice), dựng trên thư viện consumer Greyhound do Wix tự viết và mở mã nguồn. Thay đổi chính 4…
- Integrating Neo4j Into Your Stack Bài tóm tắt · Doximity · 2022
…(gem dùng chung chứa mọi query Cypher và test). Ghi đi qua Kafka: callback after commit của ActiveRecord publish message, một service riêng consume rồi upsert vào Neo4j. Neo4j sập…
- How Zillow Tests Clickstream Analytics Bài tóm tắt · Zillow · 2020
…ẫn bản test của Data Streaming Platform ; DSP ghi vào topic Kafka (và Kafka Connect lưu S3), nên event đọc được ngay. - Test chức năng: Selenium + ChromeDriver thao tác trang như n…
- Concourse: Generating Personalized Content Notifications in Near-Real-Time Bài tóm tắt · LinkedIn · 2018
…t Pepper) chạy bằng workflow Hadoop vài lần mỗi ngày: event Kafka được ETL vào HDFS, join với đồ thị fan-out, gắn feature, chấm điểm bằng model, rồi chuyển cho ATC (cổng chung cho…
- Scaling Slack's Job Queue Bài tóm tắt · Slack · 2017
…ngineer ngại dùng. Thay đổi chính - Thay đổi tối thiểu: đặt Kafka trước Redis thay vì thay Redis bằng Kafka (thay hẳn sẽ phải viết lại logic lập lịch, chạy, khử trùng); interface e…
- Jepsen: Redpanda 21.10.1 Bài tóm tắt · Jepsen · 2022
…ug. Bối cảnh - Redpanda: hệ streaming tương thích giao thức Kafka, dùng Raft nội bộ thay ZooKeeper, quảng bá "không mất dữ liệu mặc định" vì chỉ ack sau khi fsync trên đa số replic…
- Accelerating real-time alerts with Redpanda: a successful migration story Bài tóm tắt · Redpanda · 2023
…gốc](https://www.redpanda.com/blog/equal-experts-migration-kafka-redpanda) Bài khách (Eric Laguer, Equal Experts, một công ty dịch vụ IT) đăng trên blog của nhà cung cấp, kể dự án…
- Building Venice with Apache Helix Bài tóm tắt · LinkedIn · 2017
…bda, chỉ batch, hoặc chỉ stream (kappa). - Đường ghi đi qua Kafka: dữ liệu từ Hadoop hoặc Samza được đẩy vào Kafka; storage node không nhận ghi online mà tự ingest bất đồng bộ từ K…
- Me and my shadow (link!): Disaster recovery replication made easy Bài tóm tắt · Redpanda · 2026
…chạy ngay trong broker của cụm đích, đọc từ cụm nguồn bằng Kafka API thường; cụm nguồn không biết có link (chỉ thấy thêm tải đọc). - Sao chép: dữ liệu topic giữ nguyên offset , ti…
- How We Built a Cross-Region Caching Library Bài tóm tắt · Wix · 2022
…i cảnh - Wix (2022): hơn 500 tỷ HTTP request và 30 tỷ event Kafka mỗi ngày, hơn 2.500 microservice ở nhiều data center. - Nhiều team tự viết thư viện cache nửa vời, mỗi nhóm một ki…
- Attribute-Based Access Control at Uber Bài tóm tắt · Uber · 2023
…ểu thức cần). - Áp dụng (2023): 70 service dùng ABAC. Ví dụ Kafka: topic là resource uon://topics.kafka/production/<topic với action subscribe/publish/admin. Đội Kafka không thể qu…
- The Art of Being Lazy(log): Lower Latency and Higher Availability With Delayed Sequencing Bài tóm tắt · WarpStream · 2026
…phụ thuộc vào control plane) và . Bối cảnh - WarpStream là Kafka tương thích giao thức, dữ liệu chỉ nằm trên object storage ; Agent stateless, không có leader, bất kỳ Agent nào cũ…
- FollowFeed: LinkedIn's Feed Made Faster and Smarter Bài tóm tắt · LinkedIn · 2016
…p99 mỗi bản ghi cho feed mobile). - Ingest bất đồng bộ qua Kafka: service Partitioner đọc stream mọi nội dung rồi ghi lại sang topic có partition khớp partition của index node; cù…
- Open sourcing Brooklin: Near real-time data streaming at scale Bài tóm tắt · LinkedIn · 2019
…loại hệ nguồn và đích tăng nhanh (Espresso, Oracle, MySQL, Kafka, Azure Event Hubs, Kinesis). - Mirror Kafka giữa các cụm và data center dùng Kafka MirrorMaker (KMM) : mỗi cụm KMM…
- Our Journey to a Near Perfect Log Pipeline Bài tóm tắt · Salesforce · 2017
…Kiến trúc mới (làm từ cuối 2015): Logstash trên mỗi host → Kafka cục bộ ở mỗi data center (Ajna Local) → MirrorMaker qua WAN → Kafka tổng ở Secure Zone (hàng trăm broker; theo bài…
- From Batch Snapshots to Near-Real-Time Data Bài tóm tắt · Doximity · 2026
…à phục hồi của nó. - Theo bài, phần khó không phải nối DB → Kafka → Snowflake mà là bốn câu hỏi xung quanh. Thay đổi chính - Hai đường với điểm mạnh khác nhau: batch dựng snapshot…
- Image Migration to Google Cloud Platform Bài tóm tắt · trivago · 2024
…umer : ảnh lên S3, replicate phần DB liên quan sang AWS qua Kafka + Debezium, đổi PHP sang Python, thêm pipeline sinh ID ảnh mới nhưng phải giữ bảng ánh xạ ID cũ ↔ mới vì vài team…
- Scaling Security Insights: how we achieved a 10x increase in global scanning capacity Bài tóm tắt · Cloudflare · 2026
…t, tiến trình crash. - Kiến trúc: scheduler đẩy message vào Kafka → fan-out tới các checker (microservice Go, mỗi loại kiểm một thứ, mỗi loại một consumer group) → checker gửi kết…
- An inside look at LinkedIn's data pipeline monitoring system Bài tóm tắt · LinkedIn · 2019
…cảnh - Dữ liệu vào Hadoop chủ yếu qua Apache Gobblin (nguồn Kafka, Espresso, Oracle), job batch chạy hàng giờ trên hàng trăm dataset. Giám sát lúc đó chỉ là trạng thái pass/fail củ…
- A postmortem of our May 7, 2026 outage Bài tóm tắt · Coinbase · 2026
…ở chợ theo thứ tự: chỉ-huỷ → đấu giá → giao dịch đầy đủ. 2. Kafka managed (MSK) hỏng âm thầm. Lẽ ra mất một AZ chỉ là giảm năng lực, nhưng lỗi ở control plane của MSK làm không bầu…
- Data Mesh — A Data Movement and Processing Platform @ Netflix Bài tóm tắt · Netflix · 2022
…o nền tảng quản lý, đọc binlog và đẩy sự kiện CDC vào topic Kafka đứng trước nguồn; ứng dụng cũng có thể tự phát event qua thư viện chung (khi chưa có connector, hoặc muốn phát dom…
- Constraint Management for cluster operation safety and reliability at Twitter Bài tóm tắt · Twitter · 2023
…fety-and-reliability-at-twitter) Bối cảnh - Team Messaging (Kafka và PubSub) chạy hàng chục cụm Kafka broker trên hybrid Mesos, mỗi cụm từ vài chục đến vài trăm broker. Dữ liệu rep…
- Behind the scenes: Redpanda Cloud's response to the GCP outage Bài tóm tắt · Redpanda · 2025
…/blog/gcp-outage-june-redpanda-cloud) Bài của nhà cung cấp (Kafka-compatible streaming), có phần quảng bá; mọi nhận định là theo Redpanda. Cùng ngày sự cố với . Bối cảnh - 12/6/202…
- Building a Data Streaming Platform Bài tóm tắt · Zillow · 2020
…kém hiệu quả hơn để service ổn định. Hướng tới: chuyển sang Kafka + schema registry, tạo topic bằng CI/CD. - Kết quả: thời gian để một team đưa dữ liệu vào lake từ vài tuần xuống v…