Tìm kiếm
12 kết quả cho “MirrorMaker”. Tìm không phân biệt dấu.
- Resiliency and Disaster Recovery with Kafka Bài tóm tắt · eBay · 2020
…g chạy Kafka nhiều cluster active/active vẫn khó, kể cả với MirrorMaker 2.0 (Kafka 2.4). - Bài toán: mỗi listing (tin đăng) phát event khi tạo, sửa, xoá; consumer chống gian lận, g…
- Running Kafka At Scale Bài tóm tắt · LinkedIn · 2015
…ong từng data center và cụm aggregate gom từ mọi local bằng MirrorMaker (chỉ chép local → aggregate nên không có vòng lặp). Message đi qua mạng giữa DC đúng một lần; consumer luôn…
- Our Journey to a Near Perfect Log Pipeline Bài tóm tắt · Salesforce · 2017
…ên mỗi host → Kafka cục bộ ở mỗi data center (Ajna Local) → MirrorMaker qua WAN → Kafka tổng ở Secure Zone (hàng trăm broker; theo bài là cụm Kafka lớn nhất họ biết) → Camus (MapRe…
- Open sourcing Brooklin: Near real-time data streaming at scale Bài tóm tắt · LinkedIn · 2019
…sis). - Mirror Kafka giữa các cụm và data center dùng Kafka MirrorMaker (KMM) : mỗi cụm KMM chỉ nối một cặp cụm Kafka nên phải vận hành hàng chục tới hàng trăm cụm KMM; lỗi một par…
- Me and my shadow (link!): Disaster recovery replication made easy Bài tóm tắt · Redpanda · 2026
…u dữ liệu, đo bằng thời gian). - Cách cũ: công cụ ngoài như MirrorMaker 2 chạy trên một cụm riêng; offset ở cụm đích khác cụm nguồn nên phải dịch offset , có thể sinh bản trùng khi…
- Event-driven, message queue và Kafka Chủ đề Thành viên
Khi một hệ có nhiều bên cần biết "có gì vừa xảy ra" (đơn hàng đổi trạng thái, tin đăng được sửa, ticket được cập nhật), gọi đồng bộ từng bên một làm producer phải biết mọi consumer, và một consumer chậm kéo chậm cả…
- Độ tin cậy và multi-region Chủ đề Thành viên
Thay đổi kiến trúc lớn thường không đến từ kế hoạch mà từ một sự cố đau đớn. Khi đã chạy nhiều vùng, nhiều giả định của hệ thống một vùng không còn đúng.
- Migration không downtime Chủ đề Thành viên
Hệ thống đang chạy thật (gọi xe, chat, thiết kế) không được dừng, nhưng phải đổi ngôn ngữ, database hoặc hạ tầng bên dưới.
- Multi-tenancy và cô lập tenant Chủ đề Thành viên
Một hệ phục vụ nhiều khách (tenant: workspace, shop, organization, account, service nội bộ) trên cùng hạ tầng thì rẻ và dễ vận hành, vì tài nguyên được dùng chung. Cái giá là bốn câu hỏi đi theo hệ suốt đời:
- Observability và monitoring Chủ đề Thành viên
Lúc đầu, monitoring là vài dashboard và một công cụ cài sẵn; log đọc thẳng từ máy. Khi hệ lớn lên, chính hệ quan sát thành một hệ phân tán có bài toán riêng:
- LinkedIn Công ty Thành viên
Bài khung là bài nhìn lại năm 2015 . LinkedIn bắt đầu năm 2003 là một monolith tên Leo. Service đầu tiên tách ra là member graph, vì đồ thị kết nối có profile tải khác hẳn; DB profile được đỡ bằng scale dọc rồi replica…
- Kafka on PaaSTA: Running Kafka on Kubernetes at Yelp (Part 2 - Migration) Bài tóm tắt · Yelp · 2022
…ửa logic operator và tự ghép cặp broker cùng AZ). Phương án MirrorMaker sang cụm mới bị loại vì bước copy dữ liệu dài. - Rollback là đảo ngược từng bước (dùng add broker ). Cả migr…