Tìm kiếm
34 kết quả cho “Aggregation”. Tìm không phân biệt dấu.
- How we built a dynamic Kubernetes API Server for the API Aggregation Layer in Cozystack Bài tóm tắt · Kubernetes · 2024
…: khai báo resource, controller reconcile. Cách khác là API aggregation layer : viết một extension API server chạy riêng, đăng ký bằng APIService ; API server chính chuyển mọi requ…
- The Day Our Own Queries DoS'ed Us: Inside Zalando Search Bài tóm tắt · Zalando · 2025
…API gọi thêm một query facet (brand, size, màu, giá): nặng aggregation theo thiết kế. - Cụm được chia theo nhóm thị trường , mỗi cụm phục vụ một vài thị trường. Diễn biến - Một ng…
- Behind the Pins: Building Analytics Bài tóm tắt · Pinterest · 2014
…ỗi ngày, giữ phần lớn một tháng. Row key userparam platform aggregation date : ngày đứng cuối để dữ liệu một biểu đồ nằm liền nhau (một lệnh scan); userparam đứng đầu để rải đều qu…
- How we built it: Real-time analytics for Stripe Billing Bài tóm tắt · Stripe · 2025
…engine mới của Pinot: engine đa tầng (v2) của Pinot hỗ trợ aggregation theo cửa sổ thời gian, tính MRR theo thời gian lúc query mà không cần tổng hợp offline. Làm cùng maintainer…
- Maintaining Machine Learning Model Accuracy Through Monitoring Bài tóm tắt · DoorDash · 2021
Model của DoorDash ước thời gian nấu, thời gian giao, quyết định giao đơn nào cho Dasher. Theo DoorDash, model bắt đầu xuống cấp ngay khi lên production (model drift) vì dữ liệu đổi: thêm khách, thêm sản phẩm, hay sự…
- Scaling Exact COUNT(DISTINCT) for High-Cardinality Non-Rollup Metrics Bài tóm tắt · Uber · 2026
Một lớp metric (user hoạt động theo tháng, giữ chân theo quý) phải tính chính xác và là non-rollup: không ghép được từ số theo ngày (một user hoạt động thứ Hai và thứ Tư chỉ tính một lần trong tuần). Theo quý, phải giữ…
- Uber's Rate Limiting System Bài tóm tắt · Uber · 2026
Kiến trúc service của Uber xử lý hàng trăm triệu RPC mỗi giây qua hàng nghìn service. Thời đầu mỗi team tự throttle (trong logic nghiệp vụ, middleware riêng, counter Redis): cấu hình và hành vi khác nhau dù cùng quota;…
- Anatomy of a serverless usage-based billing system Bài tóm tắt · WarpStream · 2024
WarpStream (Kafka trên object storage) tính tiền theo ba chiều: cluster minutes (cụm có xử lý request, tính theo khối 15 phút), throughput ghi (GiB/s), lưu trữ (GiB-giờ). Theo họ, hệ billing theo usage tốt phải tách…
- Hạ tầng tìm kiếm Chủ đề Thành viên
Lúc đầu, tìm kiếm là LIKE trên database hoặc một thư viện (Lucene) nhúng trong app. Khi dữ liệu và tính năng tăng, search thành một hệ có trạng thái riêng, khác database ở mấy điểm:
- Batching và khấu hao round-trip Chủ đề Thành viên
Nhiều nút thắt không nằm ở việc mỗi thao tác tốn bao nhiêu công, mà ở chi phí cố định trả cho mỗi thao tác: một round-trip mạng, một lần fsync, một PUT lên object storage, một syscall, một transaction. Khi chi phí cố…
- Load shedding, rate limit và backpressure Chủ đề Thành viên
Mọi hệ đều có lúc nhận nhiều việc hơn sức làm: spike của người dùng, client nội bộ có bug, dependency chậm đi, retry dồn lại. Theo Discord, khi chạm giới hạn năng lực thì đó là bài toán kinh tế: hoặc tăng cung (thêm…
- Monolith và microservices — đi và quay lại Chủ đề Thành viên
Lúc nào nên tách hệ thống thành nhiều service, và cái giá của việc đó là gì? Các nguồn hiện có cho thấy đây không phải đường một chiều.
- Nền tảng nội bộ cho service (đường ray chung) Chủ đề Thành viên
Tách hệ thống thành nhiều phần (service, hoặc component trong một monolith) giải được bài toán tổ chức. Nhưng nếu mỗi team tự làm RPC, retry, log, metric, contract theo cách riêng, thì ta chỉ đổi một kiểu hỗn loạn lấy…
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- Scale dọc trước khi scale ngang Chủ đề
Thêm máy (scale ngang) kéo theo độ phức tạp phân tán. Bắt mỗi máy làm được nhiều hơn (scale dọc, tối ưu) thì đơn giản hơn, nhưng có trần và dễ thành một điểm hỏng.
- Sự cố và postmortem Chủ đề Thành viên
Nhiều bước ngoặt kiến trúc trong wiki bắt đầu từ một sự cố: Netflix lên cloud sau 3 ngày không gửi được DVD, Twitter viết lại hệ thống sau World Cup 2010, Instagram đi nhiều data center sau trận bão 2012. Trang này gom…
- The evolution of SQL-based Observability Bài tóm tắt · ClickHouse · 2024
…o từng nhóm truy vấn, lọc tập con để chạy alert, tính trước aggregation. Theo họ, biến đổi trong ClickHouse rẻ hơn trong collector. - Không phải dữ liệu nào cũng theo OTel: nội bộ,…
- How we made ClickStack 5x faster for ClickHouse observability Bài tóm tắt · ClickHouse · 2026
…uery chậm, Top N trên khoảng thời gian ngắn chậm, search và aggregation bị timeout. Cách xử lý trước đó là sửa vá từng trường hợp. - Đầu 2026 lập nhóm chuyên: tìm mẫu truy vấn phổ…
- How LinkedIn extended ClickHouse from distributed tracing to metric discovery and analytics Bài tóm tắt · ClickHouse · 2026
…hêm vào để thay hai cái kia nhưng thành cái thứ ba; kém với aggregation rộng và kết quả lớn). Tới 2025 cả ba chạm trần. - Phương án bị loại: tự viết thêm (chỉ vài người hiểu); MySQ…
- DuckDB Labs Công ty Thành viên
DuckDB Labs có ba nguồn trong wiki, đều năm 2026 và đều là nhà cung cấp viết về format lakehouse. Lập luận chung: metadata của lake nên nằm trong một database (catalog) thay vì rải thành file trên object storage. Data…
- Data Inlining in DuckLake: Unlocking Streaming for Data Lakes Bài tóm tắt · DuckDB Labs · 2026
…Postgres rẻ hơn ghi một file Parquet lên S3 cho mỗi lô). - Aggregation nhanh hơn 926 lần : không inline thì mỗi query mở 30.000 file trên S3. - Checkpoint nhanh hơn 14,5 lần: gộp…
- Zalando Công ty Thành viên
Năm 2016 Zalando dựng microservices CRUD phát event mà không có read API: mỗi team tự replay stream và dựng bản sao, sinh nhiều nguồn sự thật; event Offer trễ tới 30 phút dịp Cyber Week. Từ 2022 họ gom về Product Read…
- From vendors to vanguard: Airbnb's hard-won lessons in observability ownership Bài tóm tắt · Airbnb · 2026
…latency). Bộ dịch nhận ra ý định (ví dụ có p95) thì bỏ các aggregation chồng lên và trả về query histogram chuẩn. Vì giữ nguyên tên metric cũ (để code và dữ liệu không lệch nhau),…
- Catching bugs on the client-side: how we developed our error tracking system Bài tóm tắt · Bumble · 2020
…h. Elasticsearch có sẵn cả ba, scale và nhân bản sẵn, nhiều aggregation; nhược điểm: ngôn ngữ truy vấn khó, JVM cần chuyên môn (gặp vấn đề GC khi nâng từ 6.8 lên 7.5), nén chuỗi ké…
- Lessons learned from running GraphQL at scale Bài tóm tắt · Dream11 · 2021
…ủa nó nhân lên thành hàng nghìn máy. Bài học cho SWE - Tầng aggregation (GraphQL/BFF) giữ microservice đơn giản nhưng thành điểm tập trung chi phí và rủi ro ; đáng đầu tư tối ưu ri…
- Fastest Table Sort in the West – Redesigning DuckDB's Sort Bài tóm tắt · DuckDB Labs · 2021
…đằng nào cũng phải làm. Dùng chung layout hàng với join và aggregation. - Ra đĩa nhờ buffer manager: chuỗi độ dài thay đổi nằm ở heap riêng nhưng xếp theo hàng; khi block bị đẩy r…
- Redesigning DuckDB's Sort, Again Bài tóm tắt · DuckDB Labs · 2025
…- Thiết kế 2021 () chạy tốt, nhưng từ đó hash join và hash aggregation cũng được làm cho chạy vượt RAM bằng một layout trang tràn đĩa (spillable) mới tốt hơn. Sort còn dùng cách c…
- Inside Stream's Real-Time Architecture for Trading & Investing Apps Bài tóm tắt · Stream (GetStream) · 2026
…ng top N, nguồn nào không còn gì đủ mới thì ngừng xét. Khoá aggregation tính lúc ghi; ranking tính lúc đọc trên bản tóm tắt nhẹ của activity. - Bảng so sánh theo Stream: push đọc 1…
- Kubernetes Công ty Thành viên
Hai nguồn đầu của dự án Kubernetes trong wiki kể quyết định kiến trúc nằm bên trong nền tảng mà nhiều công ty khác dựng lên trên. Năm 2018, kube-proxy dùng iptables (danh sách luật vốn cho firewall) là nút cổ chai thật…
- Building a region‑aware, SEO‑friendly global web app Bài tóm tắt · Mercari · 2025
…ng series: · · · - Hai nguồn rời Next.js cùng năm: · - Tầng aggregation trước microservice:…
- Using Presto in our Big Data Platform on AWS Bài tóm tắt · Netflix · 2014
…trước để có câu trả lời nhanh; Presto không làm được (join/aggregation vượt bộ nhớ, UDF thiếu) thì quay về Hive/Pig. Presto không dùng cho pipeline production quan trọng ; muốn đư…
- How Upstash Redis Search Works? Bài tóm tắt · Upstash · 2026
…n. Upstash Redis Search thêm full-text, toán tử truy vấn và aggregation trên dữ liệu Redis. Thay đổi chính - Index theo key prefix: mỗi index theo dõi một hay nhiều prefix, có sche…
- Scaling to 100M: MySQL is a Better NoSQL Bài tóm tắt · Wix · 2015
…ion, không serial key, không foreign key, không join, không aggregation; - không chuẩn hoá; cột chỉ tồn tại để được index; - thiết kế để mỗi query đọc một dòng theo khoá chính hoặc…
- 6 Event-Driven Architecture Patterns — Part 2 Bài tóm tắt · Wix · 2020
…Kết quả là exactly-once cho cặp consume-produce. 6. Events Aggregation (biết khi nào một batch đã xong hết): - file CSV lớn chia thành nhiều job chạy song song; đếm số job xong tr…