Tìm kiếm
40 kết quả cho “Event stream”. Tìm không phân biệt dấu.
- Scaling StreamHub: Transitioning from Kinesis to Kafka for 145 Billion Daily Events Bài tóm tắt · Atlassian · 2026
…b-transitioning-from-kinesis-to-kafka-for-145-billion-daily-events) Bối cảnh - StreamHub là event bus của Atlassian (click, impression, API call, CDC, telemetry). Đã có trong wiki…
- Event-driven, message queue và Kafka Chủ đề Thành viên
Khi một hệ có nhiều bên cần biết "có gì vừa xảy ra" (đơn hàng đổi trạng thái, tin đăng được sửa, ticket được cập nhật), gọi đồng bộ từng bên một làm producer phải biết mọi consumer, và một consumer chậm kéo chậm cả…
- Stream processing Chủ đề Thành viên
Khi batch hằng ngày hay hằng giờ không còn đủ tươi (chi tiêu quảng cáo phải dừng đúng lúc chạm ngân sách, dashboard MRR không được trễ 24 giờ, alert phải bắn khi contest sắp đầy), hệ phải tính liên tục trên luồng sự…
- Building Scalable Real Time Event Processing with Kafka and Flink Bài tóm tắt · DoorDash · 2022
…doordash.engineering/2022/08/02/building-scalable-real-time-event-processing-with-kafka-and-flink/) Bối cảnh - Event từ service và thiết bị phải tới warehouse OLAP (Snowflake), tới…
- How Zillow Tests Clickstream Analytics Bài tóm tắt · Zillow · 2020
…om/tech/how-zillow-tests-clickstream-analytics/) Bối cảnh - Event analytics (page view, sự kiện) do dev gắn vào trang, gửi Google Analytics, rồi được kéo từ BigTable về data lake (…
- Zillow Transitions to Streaming Data Architecture Bài tóm tắt · Zillow · 2016
…thời gian thực. Thay đổi chính - Đổi cách nghĩ từ bảng sang event stream: bán một căn nhà là một event giao dịch; có stream giao dịch, tin rao bán, tin cho thuê, tịch biên, khoản v…
- Open sourcing Brooklin: Near real-time data streaming at scale Bài tóm tắt · LinkedIn · 2019
…n và đích tăng nhanh (Espresso, Oracle, MySQL, Kafka, Azure Event Hubs, Kinesis). - Mirror Kafka giữa các cụm và data center dùng Kafka MirrorMaker (KMM) : mỗi cụm KMM chỉ nối một…
- Using an event-driven architecture to improve Jira Software responsiveness Bài tóm tắt · Atlassian · 2019
…[bài gốc](https://medium.com/atlassian-engineering/using-an-event-driven-architecture-to-improve-jira-software-responsiveness-542ac332f2f) Bối cảnh Board của Next-Gen Jira Software…
- The Events Rail: Inside Atlassian's Webhook Delivery Platform Bài tóm tắt · Atlassian · 2026
…-webhook-delivery-platform) Bối cảnh - webhooks-processor ("events rail") đánh giá, ghép và giao event từ Jira, Confluence, Bitbucket tới app Forge, repository hook, endpoint audit…
- Ensuring High Availability of Ads Realtime Streaming Services Bài tóm tắt · Pinterest · 2021
…iều lần trong vài năm. Luồng thời gian thực: Ads Server ghi event hiển thị và hành động → Spend Aggregator (Flink) gộp thành event chi tiêu theo nhà quảng cáo → ba service Kafka St…
- WarpStream Công ty Thành viên
Kafka "diskless" trên object storage. Năm 2025 ra mắt cụm đa region: agent ghi quorum 3 bucket ở 3 region, control plane trên DynamoDB Global Tables hoặc Spanner đa region với một leader được bầu; mất trọn một region mà…
- Building a Data Streaming Platform Bài tóm tắt · Zillow · 2020
…eam ML kéo dữ liệu từ DB của team khác; để chủ dữ liệu phát event có schema. - Thư viện client tối ưu cho một stream có thể sập khi một process ghi vào rất nhiều stream. - Đánh đổi…
- Benchmarking Streaming Computation Engines at Yahoo! Bài tóm tắt · Yahoo · 2015
….5.1. Thiết kế benchmark - Ứng dụng quảng cáo đơn giản: đọc event JSON từ Kafka → giải mã → lọc theo event type → chiếu ad id , event time → join ad id với campaign id trong Redis…
- From Homegrown to Flink: Migrating a Stateful Ad Event Join at Scale Bài tóm tắt · Zalando · 2026
…(https://engineering.zalando.com/posts/2026/07/migrating-ad-event-processing-to-flink.html) Bối cảnh - Mảng quảng cáo (Sponsored Products) phải ghép mỗi lượt xem hoặc click với phi…
- Utilizing Amazon DynamoDB and AWS Lambda for Asynchronous Event Publication Bài tóm tắt · Zalando · 2022
…DynamoDB, cập nhật qua REST đồng bộ; mỗi thay đổi phải phát event lên Nakadi (message bus của Zalando). - Ban đầu service ghi DynamoDB rồi gửi event ngay trong request, nên phụ thu…
- Robinhood Swaps Kafka for WarpStream to Tame Logging Workloads and Costs Bài tóm tắt · WarpStream · 2025
Robinhood (2025): hơn 14 triệu người dùng hoạt động mỗi tháng, hơn 10 TB dữ liệu mỗi ngày. Log gồm log ứng dụng và pipeline observability chạy bằng Vector, trước đó đi qua Kafka.
- 6 Event-Driven Architecture Patterns — Part 1 Bài tóm tắt · Wix · 2020
…Trung bình — [bài gốc](https://medium.com/wix-engineering/6-event-driven-architecture-patterns-part-1-93758b253f47) Phần 1/2, tác giả thuộc team data-streams (hạ tầng messaging trê…
- From Event-Driven Chaos to a Blazingly Fast Serving API Bài tóm tắt · Zalando · 2025
…o — [bài gốc](https://engineering.zalando.com/posts/2025/03/event-driven-to-api.html) Bối cảnh - 2016: Zalando dựng microservices với các CRUD API riêng cho từng phần dữ liệu sản p…
- 6 Event-Driven Architecture Patterns — Part 2 Bài tóm tắt · Wix · 2020
…: Nâng cao — [bài gốc](https://medium.com/wix-engineering/6-event-driven-architecture-patterns-part-2-455cc73b22e1) Phần 2/2 (phần tiếp, không có trong sheet). Phần 1: . Bối cảnh B…
- How we seamlessly migrated high volume real-time streaming traffic with zero data loss and duplication Bài tóm tắt · Grab · 2024
Grab tách phần đọc và phần ghi của một backend service thành hai service riêng để scale độc lập.
- Inside Stream's Real-Time Architecture for Trading & Investing Apps Bài tóm tắt · Stream (GetStream) · 2026
…). Backend giao dịch quyết định chuyện gì xảy ra và publish event ( OrderFilled , PriceThresholdCrossed ); mặt phẳng trải nghiệm chỉ phân phối. - Tải dồn vào giờ mở cửa thị trường:…
- How WarpStream Powers Grafana Labs' Redesigned Architecture Bài tóm tắt · WarpStream · 2025
Grafana Mimir (2025): TSDB mã nguồn mở, scale ngang, multi-tenant, tương thích Prometheus; đã chạy tới 1 tỷ active series. Là nền của Grafana Cloud Metrics.
- Roshi: a CRDT system for timestamped events Bài tóm tắt · SoundCloud · 2014
…ers.soundcloud.com/blog/roshi-a-crdt-system-for-timestamped-events) Bối cảnh - Stream của SoundCloud: các event (thời điểm, ai làm, làm gì) từ những người mình follow, xếp mới nhất…
- Building a Pipeline to Process Clickstream Data Bài tóm tắt · Zillow · 2018
…Clickstream là một trong những dataset lớn nhất: gần một tỷ event/ngày , dataset lớn nhất khoảng 2 TB/ngày chưa nén, bảng rộng nhất khoảng 700 cột (2018). Dùng cho dashboard, cá nh…
- Debugging Production with Event Logging Bài tóm tắt · Zillow · 2018
…ốc](https://www.zillow.com/engineering/debugging-production-event-logging/) Bối cảnh - Trang tìm căn hộ: khi lưu một bản ghi vào SQL, các thuộc tính tìm kiếm được index vào Elastic…
- Scaling our Observability platform beyond 100 Petabytes by embracing wide events and replacing OTel Bài tóm tắt · ClickHouse · 2025
…clickhouse.com/blog/scaling-observability-beyond-100pb-wide-events-replacing-otel) Bài của nhà cung cấp về hệ log nội bộ (LogHouse, giám sát ClickHouse Cloud); có quảng bá sản phẩm…
- Samza Aeon: Latency Insights for Asynchronous One-Way Flows Bài tóm tắt · LinkedIn · 2018
…nhưng thật ra kéo dài không đo được. Thay đổi chính - Chọn event bắt đầu và event kết thúc của luồng (ví dụ nhận request tạo tin nhắn và lúc publish push tới APNS/GCM), cả hai đều…
- How Intelligent Load Shedding Prevents Cascading Failures in Tier-0 Systems Bài tóm tắt · Salesforce · 2026
…/engineering.salesforce.com/how-intelligent-load-shedding-prevents-cascading-failures-in-tier-0-systems/) Bài phỏng vấn (chuỗi "Engineering Energizers") với VP Engineering của team…
- Analysis of recent downtime & what we're doing to prevent future incidents Bài tóm tắt · Asana · 2019
…ttps://blog.asana.com/2019/09/downtime-what-were-doing-to-prevent-future-downtime/) Bối cảnh - Đa số dữ liệu người dùng của Asana đã shard, nhưng một phần mô hình dữ liệu dùng chun…
- Preventing Rogue Cookies with the Zillow Cookie Checker Bài tóm tắt · Zillow · 2019
Từ 2018 Zillow dọn cookie và nâng banner tuỳ chọn cookie: người dùng tắt cookie quảng cáo/chức năng thì không trang nào được tạo các cookie đó. Cookie đến từ tag trong Google Tag Manager và từ code của Zillow.
- Anatomy of a serverless usage-based billing system Bài tóm tắt · WarpStream · 2024
…rữ (GiB-giờ). Theo họ, hệ billing theo usage tốt phải tách "event" khỏi "metric": giữ event thô để đổi logic tính tiền về sau mà không đổi cách sinh dữ liệu. Thay đổi chính - BYOC…
- Automatic Apache Kafka Migrations With Orbit Bài tóm tắt · WarpStream · 2026
Chuyển một cụm Kafka sang WarpStream gồm ba phần: dữ liệu, consumer, producer. Một cụm thường phục vụ nhiều team.
- Data Mesh at Grab (Part II): The foundational tools behind certification Bài tóm tắt · Grab · 2026
…Airflow kéo định kỳ. Mọi thay đổi được phát lên Kafka thành event (change log mức thấp cho indexer và audit, event ngữ nghĩa mức cao cho workflow). - Chứng nhận được tính, không gá…
- Twitter Sparrow tackles data storage challenges of scale Bài tóm tắt · Twitter · 2022
…) Bối cảnh - Mọi tương tác (bấm, vuốt, cuộn) được log thành event từ hàng chục nghìn microservice ở nhiều data center; quy mô hàng chục nghìn node, hàng trăm petabyte, hàng nghìn t…
- The Art of Being Lazy(log): Lower Latency and Higher Availability With Delayed Sequencing Bài tóm tắt · WarpStream · 2026
WarpStream là Kafka tương thích giao thức, dữ liệu chỉ nằm trên object storage; Agent stateless, không có leader, bất kỳ Agent nào cũng nhận produce cho bất kỳ partition nào. Đổi lại là latency: PUT object storage mất…
- The Log: What every software engineer should know about real-time data's unifying abstraction Bài tóm tắt · LinkedIn · 2013
…sang đẩy dữ liệu từ Hadoop ra, monitoring... Hàng trăm loại event (page view, impression, search, gọi service, exception). Năm 2013: hơn 60 tỷ message ghi/ngày . - Lợi ích kiến trú…
- A brief history of Notion's data catalog Bài tóm tắt · Notion · 2024
…ến thức truyền miệng, tên không thống nhất, không phân biệt event quan trọng hay không, không rõ ai sở hữu (một event bị sửa nhầm làm hỏng consumer phía sau), không ai biết có dữ l…
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- How to Pitch Apache Kafka Bài tóm tắt · Zillow · 2020
…g Platform , mục tiêu Kafka là "hệ thần kinh trung ương" về event: - Terraform provider riêng để team tự tạo topic (cân bằng phi tập trung và kiểm soát, ví dụ chặn topic 10.000 par…
- Resiliency and Disaster Recovery with Kafka Bài tóm tắt · eBay · 2020
…er 2.0 (Kafka 2.4). - Bài toán: mỗi listing (tin đăng) phát event khi tạo, sửa, xoá; consumer chống gian lận, gửi thông báo, index search, khuyến mãi. Có hai nhóm consumer: - chỉ c…