Tìm kiếm
40 kết quả cho “delta”. Tìm không phân biệt dấu.
- Under the Hood of the Grammarly Editor, Part Two: How Suggestions Work Bài tóm tắt · Grammarly · 2022
…ùng giao thức operational transformation (OT) với định dạng Delta (insert, delete, retain) cho cả văn bản, thay đổi của người dùng và gợi ý từ backend. Backend quét văn bản rồi gửi…
- Nebula as a Storage Platform to Build Airbnb's Search Backends Bài tóm tắt · Airbnb · 2016
…Base, không schema; API key-value thống nhất gộp hai lớp: - Delta store trên DynamoDB nhận ghi realtime (chọn vì latency đọc thấp và AWS vận hành); chia bảng theo ngày để mỗi bảng…
- From Batch Snapshots to Near-Real-Time Data Bài tóm tắt · Doximity · 2026
…ery trước khi merge: consumer đọc view = bảng base đã nén + delta chưa merge (lấy thay đổi mới nhất theo khoá chính, phủ lên base, bỏ dòng có thao tác cuối là delete). Worker merge…
- Why Adaptive Warehouses Are up to 13.7x Faster for DML Operations Bài tóm tắt · Snowflake · 2026
…ính thay đổi. Thay đổi chính: bốn nút thắt, lần lượt 1. Ghi delta: với thay đổi thưa, ghi file delta nhỏ kèm bitmap thay vì viết lại cả partition. 2. Dùng lại thống kê cột trên các…
- How Discord Reduced Websocket Traffic by 40% Bài tóm tắt · Discord · 2024
…ì gửi lại toàn bộ danh sách khi một phần tử đổi. V2 chỉ gửi delta: từ 35% xuống 5% băng thông gateway. - Tổng: giảm gần 40% băng thông gateway (1–8/2024). Vì sao - Kết nối gateway…
- Concourse: Generating Personalized Content Notifications in Near-Real-Time Bài tóm tắt · LinkedIn · 2018
…hỉ chấm vài nghìn bản ghi/giây và giữ vài GB feature. - Đẩy delta feature: đẩy đủ từ Hadoop mất gần một ngày và đè nặng Kafka; chuyển sang đẩy phần thay đổi mỗi ngày và đẩy đủ mỗi…
- DBLog: A Generic Change-Data-Capture Framework Bài tóm tắt · Netflix · 2019
…ge-data-capture-framework-69351fb9099b) Bối cảnh - Nền tảng Delta của Netflix giữ nhiều kho dữ liệu đồng bộ: một kho là nguồn sự thật (MySQL), các kho khác dẫn xuất (Elasticsearch)…
- Data Mesh — A Data Movement and Processing Platform @ Netflix Bài tóm tắt · Netflix · 2022
…ờng mặc định cho di chuyển dữ liệu, đạt ngang tính năng với Delta và Keystone để chuyển dần; gộp nhiều processor đơn giản vào một job Flink cho hiệu quả; thêm connector. Vì sao - N…
- Anatomy of a (Postgres) search engine Bài tóm tắt · PlanetScale · 2026
…phần) → postings list (danh sách ID tài liệu đã sắp và nén: delta encoding khi dày, bitmap khi khoảng nửa tài liệu chứa từ đó; hợp/giao danh sách đã sắp là một lượt O(n), bitmap th…
- Inside Stream's Real-Time Architecture for Trading & Investing Apps Bài tóm tắt · Stream (GetStream) · 2026
Theo Stream, app giao dịch có hai "mặt phẳng" realtime: giao dịch (lệnh, khớp, sổ cái; cần thứ tự, idempotency, kiểm toán) và trải nghiệm (feed, thông báo, chat, video; cần fan-out toàn cầu và latency cảm nhận thấp).…
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- Batching và khấu hao round-trip Chủ đề Thành viên
Nhiều nút thắt không nằm ở việc mỗi thao tác tốn bao nhiêu công, mà ở chi phí cố định trả cho mỗi thao tác: một round-trip mạng, một lần fsync, một PUT lên object storage, một syscall, một transaction. Khi chi phí cố…
- Kiến trúc frontend Chủ đề Thành viên
Frontend bắt đầu là vài trang render ở server; lớn lên thành ứng dụng có trạng thái, nhiều team cùng sửa, và mỗi tính năng thêm vào là thêm byte phải tải. Ba trục lặp lại trong các nguồn: render ở đâu (server, client,…
- Migration không downtime Chủ đề Thành viên
Hệ thống đang chạy thật (gọi xe, chat, thiết kế) không được dừng, nhưng phải đổi ngôn ngữ, database hoặc hạ tầng bên dưới.
- Realtime và fan-out Chủ đề Thành viên
Một sự kiện (tin nhắn, ảnh, tweet, vote) phải tới rất nhiều người, rất nhanh, qua rất nhiều kết nối mở cùng lúc.
- Chọn database theo workload Chủ đề Thành viên
Không có database tốt nhất, chỉ có database hợp với mẫu đọc/ghi ở một quy mô cụ thể. Mẫu đó thay đổi khi sản phẩm lớn lên. Ngoài ra, chuyên môn vận hành của đội cũng là một phần của "workload".
- Failover, replica và dự phòng dữ liệu Chủ đề Thành viên
Mọi hệ có trạng thái đều giữ nhiều bản (replica) để một máy chết không làm mất dịch vụ. Khó không nằm ở việc có bản sao mà ở lúc chuyển sang bản sao:
- Giao dịch phân tán và nhất quán xuyên service Chủ đề Thành viên
Với một DB quan hệ, BEGIN … COMMIT lo hết. Khi dữ liệu bị chia (shard, tách service, thêm Redis bên cạnh Postgres), một thao tác nghiệp vụ chạm nhiều nơi, và câu hỏi khó nhất trở thành "timeout rồi, việc đó đã xảy ra…
- Hạ tầng tìm kiếm Chủ đề Thành viên
Lúc đầu, tìm kiếm là LIKE trên database hoặc một thư viện (Lucene) nhúng trong app. Khi dữ liệu và tính năng tăng, search thành một hệ có trạng thái riêng, khác database ở mấy điểm:
- Stream processing Chủ đề Thành viên
Khi batch hằng ngày hay hằng giờ không còn đủ tươi (chi tiêu quảng cáo phải dừng đúng lúc chạm ngân sách, dashboard MRR không được trễ 24 giờ, alert phải bắn khi contest sắp đầy), hệ phải tính liên tục trên luồng sự…
- Tách compute khỏi storage Chủ đề Thành viên
Hệ có trạng thái kiểu cổ điển (database, broker Kafka, fileserver Git) đặt dữ liệu bền trên đĩa của chính máy xử lý. Máy đó vừa là compute vừa là storage, nên:
- Xử lý sự cố và on-call Chủ đề Thành viên
Khi hệ còn nhỏ, vài người biết hết mọi thứ; có lỗi thì người thấy đầu tiên sửa luôn. Khi có hàng trăm service và hàng trăm engineer, câu hỏi đổi khác:
- How the controller-runtime Cache Actually Works, and Why Your Controller Does Not Crash the API Server Bài tóm tắt · Kubernetes · 2026
…snapshot mới. Relist chỉ xảy ra khi lỗi, không theo lịch. - Delta queue: trước là DeltaFIFO (gom delta theo key, có gộp); nay mặc định là RealFIFO (từ client-go 1.36 không bật lại…
- Grammarly Công ty Thành viên
Hạ tầng AWS ban đầu một region, mỗi team một tài khoản và một VPC, nối bằng peering. Năm 2021, để đưa model và API gần user và đạt chuẩn tuân thủ, họ chuyển sang mỗi tài khoản một môi trường của một project, Transit…
- Instacart's Item Availability Architecture: Solving for scale and consistency Bài tóm tắt · Instacart · 2023
…vùng × 8 nhóm user = 576), dùng ngưỡng gốc theo model + các delta cộng dồn theo phân khúc , lưu trong DB để chỉnh nhanh (ví dụ khi thiếu sữa bột trẻ em chỉ chỉnh delta của một loại…
- Migrating Data Ingestion Systems at Meta Scale Bài tóm tắt · Meta · 2026
…quản . - Hai hệ đều dùng CDC : một bảng full dump, một bảng delta và bảng đích. Dữ liệu đã land được dùng để sinh dữ liệu mới, nên lỗi lan truyền sang các lần sau. Thay đổi chính -…
- Atomic slot migration with Redis 8.4 Bài tóm tắt · Redis · 2026
…ở mức slot : chép toàn bộ nội dung slot sang đích kèm luồng delta, xong thì chuyển quyền sở hữu một lần, nguyên tử . Trong lúc chép, client vẫn nói chuyện với nguồn. - Lệnh CLUSTER…
- Airbnb Công ty Thành viên
Airbnb chuyển từ một ứng dụng Rails khổng lồ sang SOA, và lộ ra chi phí test: deep integration test cho mọi service không scale, nên họ chuyển sang tháp test + CD có canary analysis . Năm 2025 với ba trụ sản phẩm, data…
- Netflix Công ty Thành viên
Sự cố hỏng DB năm 2008 dẫn tới 7 năm lên AWS theo hướng cloud-native . Bài kiểm tra lớn đầu tiên là sự cố AWS US-East năm 2011: kiến trúc stateless, nhiều zone, fallback chịu được, nhưng rút khỏi zone phải làm tay. Từ…
- Redis Công ty Thành viên
Nguồn duy nhất của Redis (công ty) trong wiki là bài về atomic slot migration ở Redis 8.4: Redis Cluster dời hash slot giữa shard bằng cách chép snapshot của cả slot kèm luồng delta rồi chuyển quyền một lần, thay cho…
- Snowflake Công ty Thành viên
Nguồn đầu tiên của Snowflake trong wiki là bài về đường ghi của Adaptive Warehouses (2026): micro-partition bất biến làm sửa nhỏ thành viết lại lớn, nên họ ghi delta + bitmap, dùng lại thống kê cột, rồi chồng I/O với…
- Alerting Framework at Airbnb Bài tóm tắt · Airbnb · 2017
…Chạy lại mỗi giờ để theo kịp host/role mới. Có dry-run hiện delta giữa nhánh và Datadog; team được khuyến khích chạy dry-run trước khi deploy. - Team thêm host source riêng (ví dụ…
- Tracking the Money — Scaling Financial Reporting at Airbnb Bài tóm tắt · Airbnb · 2017
…nguồn hay bị sửa, "xoá và ghi lại toàn bộ" dễ đúng hơn tính delta. Liên quan - · - Thanh toán chống trùng ở phía online:…
- Discord Công ty Thành viên
Hiếm có công ty nào kể cùng một bài toán qua 6 năm như Discord. Năm 2015 họ cố ý dùng một replica set MongoDB để ra sản phẩm trong 2 tháng, kèm đường thoát. Họ phân tích workload rồi chuyển sang Cassandra 12 node với…
- Doximity Công ty Thành viên
Mọi app Rails dùng Kafka qua gem nội bộ dox-messaging. Năm 2022 họ thay ruby-kafka (heartbeat chung thread, gây rebalancing storm) bằng rdkafka trên librdkafka mà giữ nguyên interface; qua đợt segfault khi rollout,…
- DuckLake v1.0: The Lakehouse Format Built on SQL Reaches Production-Readiness Bài tóm tắt · DuckDB Labs · 2026
…chứ không rải thành file trên object storage như Iceberg và Delta. Catalog là bất kỳ hệ nào nói SQL, có primary key và lưu được bảng: SQLite, PostgreSQL, hoặc chính DuckDB. Dữ liệu…
- Data Inlining in DuckLake: Unlocking Streaming for Data Lakes Bài tóm tắt · DuckDB Labs · 2026
…h là theo DuckDB Labs. Bối cảnh - Data lake (Iceberg, Hudi, Delta) lưu dữ liệu bằng Parquet và metadata cũng bằng file (JSON, Avro) trên object storage. Mỗi lần ghi nhỏ tạo một fil…
- Scaling Grab's Data Lake: Our journey to Apache Iceberg adoption Bài tóm tắt · Grab · 2026
…nguồn): Spark chỉ có một catalog mặc định, nên khi Iceberg, Delta, Hudi, Hive cùng tồn tại người dùng phải gõ tiền tố theo định dạng, và mỗi lần một bảng đổi định dạng thì mọi truy…
- Single-Store Vector Index: Architecture and Memory Efficiency Bài tóm tắt · Memgraph · 2026
…dùng READ UNCOMMITTED cho hiệu năng, phần còn lại vẫn theo delta và mức cô lập thường. Không phải đồng bộ giữa graph DB và vector store. - Cấu trúc: dựa trên thư viện USearch (C++…
- Research at scale: Orchestrating ML for systematic trading Bài tóm tắt · Optiver · 2025
…nfig) và dữ liệu (một catalog chung trên S3, NFS, Postgres, Delta Table). - Từ DAG do scheduler giữ sang điều phối trong process: kiểu truyền thống giao cả DAG cho Slurm; không hợp…