Tìm kiếm
10 kết quả cho “offline backfill”. Tìm không phân biệt dấu.
- How PayPal Uses Real-time Graph Database and Graph Analysis to Fight Fraud Bài tóm tắt · PayPal · 2021
…g có chịu lỗi, khoảng một triệu QPS , backfill linh hoạt từ offline lên online, đáp ứng yêu cầu bảo mật và riêng tư. - Đường ghi hai kênh gói trong một service xử lý dữ liệu đồ thị…
- How we built it: Real-time analytics for Stripe Billing Bài tóm tắt · Stripe · 2025
…an, tính MRR theo thời gian lúc query mà không cần tổng hợp offline. Làm cùng maintainer để đưa engine (chưa từng dùng hướng tới user ở quy mô này) vào production. Đa số cập nhật x…
- Hạ tầng tìm kiếm Chủ đề Thành viên
Lúc đầu, tìm kiếm là LIKE trên database hoặc một thư viện (Lucene) nhúng trong app. Khi dữ liệu và tính năng tăng, search thành một hệ có trạng thái riêng, khác database ở mấy điểm:
- Nền tảng ML (feature, training, serving, giám sát model) Chủ đề Thành viên
Model ML đầu tiên của một công ty thường được nhúng thẳng vào một service có sẵn, với feature tính trong vài script và train bằng một job riêng. Khi số model và số người làm model tăng, bốn chỗ cùng hỏng:
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- Xác thực và phân quyền (authn/authz) Chủ đề Thành viên
Ở monolith, mỗi dữ liệu thường chỉ có một đường vào, nên kiểm tra quyền nằm ngay đó: một hàm hasaccess?, một API mỗi resource. Khi hệ thống tách thành nhiều service, nhiều client, nhiều loại token, cả hai nửa đều vỡ:
- Sharding và tách database Chủ đề Thành viên
Một database quan hệ duy nhất là điểm khởi đầu của hầu hết sản phẩm. Đến một lúc nó không chịu nổi lượng ghi, dữ liệu không còn vừa một máy, hoặc một sự cố ở DB đó làm sập mọi tính năng.
- Online index migration and shard-scaling in OpenSearch with AOSC Bài tóm tắt · Atlassian · 2026
…, adaptive (Gradient2 cho cả batch và concurrency, dùng khi offline). - Hỏng thì sao: trước khi đổi alias, nguồn vẫn là sự thật duy nhất, chạy lại là xong. Đổi alias là bước duy nh…
- Migration from HBase to MyRocks at Quora Bài tóm tắt · Quora · 2021
…s: việc so sánh dữ liệu làm lộ một bug có sẵn trong một job offline cho kết quả không xác định. Bài học cho SWE - Giảm số loại kho dữ liệu là một lý do chính đáng để migrate: chia…
- Uber Công ty Thành viên
Một vòng đủ: monolith → microservices → tổ chức lại microservices. Năm 2012–2013 Uber có hai monolith; khi lên hàng trăm kỹ sư thì tách. Lý do chủ yếu là tổ chức. Năm 2015 họ có 500+ service và phải chuẩn hoá contract…