Tìm kiếm
40 kết quả cho “idempotent”. Tìm không phân biệt dấu.
- Automating Periodic Data Transfer from an Operational Database to a Data Warehouse Bài tóm tắt · Allegro · 2024
…cầu đầy đủ tuyệt đối và trễ cho phép tới hàng giờ thì batch idempotent có kiểm đối chiếu đơn giản hơn streaming có cơ chế bù. Bài học cho SWE - Với dữ liệu chỉ thêm, copy theo khoả…
- Integrating Neo4j Into Your Stack Bài tóm tắt · Doximity · 2022
…đọc), giới hạn thread để ghi dồn không đè leader. - Upsert idempotent bằng MERGE trên UUID, vì có thể reset offset và replay cả topic. - Thứ tự đến lệch: quan hệ AUTHOR OF có thể…
- The AI Lied to Me — And That's When I Learned How to Use It Bài tóm tắt · Mercari · 2025
…igration: live sync và backfill dùng chung một luồng upsert idempotent luôn đọc từ nguồn sự thật . - Chạy agent không hỏi quyền ( --dangerously-skip-permissions ) với các phòng vệ…
- Netflix Conductor: A microservices orchestrator Bài tóm tắt · Netflix · 2016
…h để tìm kiếm theo input/output. - Worker là hàm stateless, idempotent , tự poll lấy việc. Poll cho phép worker tự điều tiết (backpressure) và autoscale theo độ sâu hàng đợi; Condu…
- Automatic Apache Kafka Migrations With Orbit Bài tóm tắt · WarpStream · 2026
…đo lag. Đánh đổi: chấp nhận trùng lặp thay vì mất dữ liệu (idempotent producer sẽ loại trùng). - Idempotent producer: producer ID do từng cụm cấp, nên Agent xin ID ở cả hai cụm, l…
- Maximum Warp: Building Migrations for Slack Enterprise Grid Bài tóm tắt · Slack · 2017
…rm, insert ; loại mới chỉ cần "điền chỗ trống". Mọi handler idempotent , lỗi giữa chừng thì chạy lại handler đó. - Tốc độ an toàn: ứng dụng chạy nhanh hơn sức DB chịu; theo dõi CPU…
- Event-driven, message queue và Kafka Chủ đề Thành viên
Khi một hệ có nhiều bên cần biết "có gì vừa xảy ra" (đơn hàng đổi trạng thái, tin đăng được sửa, ticket được cập nhật), gọi đồng bộ từng bên một làm producer phải biết mọi consumer, và một consumer chậm kéo chậm cả…
- Giao dịch phân tán và nhất quán xuyên service Chủ đề Thành viên
Với một DB quan hệ, BEGIN … COMMIT lo hết. Khi dữ liệu bị chia (shard, tách service, thêm Redis bên cạnh Postgres), một thao tác nghiệp vụ chạm nhiều nơi, và câu hỏi khó nhất trở thành "timeout rồi, việc đó đã xảy ra…
- Migration không downtime Chủ đề Thành viên
Hệ thống đang chạy thật (gọi xe, chat, thiết kế) không được dừng, nhưng phải đổi ngôn ngữ, database hoặc hạ tầng bên dưới.
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- Failover, replica và dự phòng dữ liệu Chủ đề Thành viên
Mọi hệ có trạng thái đều giữ nhiều bản (replica) để một máy chết không làm mất dịch vụ. Khó không nằm ở việc có bản sao mà ở lúc chuyển sang bản sao:
- Tự động hoá vận hành và auto-remediation Chủ đề Thành viên
Khi số máy, shard, pod tăng lên hàng nghìn, lỗi "hiếm" (một node chết, một đĩa hỏng, một replica trễ) thành chuyện hằng ngày, và thao tác tay không còn theo kịp: Stripe có hàng trăm lần shard suy giảm mỗi năm, mỗi lần…
- Monolith và microservices — đi và quay lại Chủ đề Thành viên
Lúc nào nên tách hệ thống thành nhiều service, và cái giá của việc đó là gì? Các nguồn hiện có cho thấy đây không phải đường một chiều.
- Multi-tenancy và cô lập tenant Chủ đề Thành viên
Một hệ phục vụ nhiều khách (tenant: workspace, shop, organization, account, service nội bộ) trên cùng hạ tầng thì rẻ và dễ vận hành, vì tài nguyên được dùng chung. Cái giá là bốn câu hỏi đi theo hệ suốt đời:
- Realtime và fan-out Chủ đề Thành viên
Một sự kiện (tin nhắn, ảnh, tweet, vote) phải tới rất nhiều người, rất nhanh, qua rất nhiều kết nối mở cùng lúc.
- Sharding và tách database Chủ đề Thành viên
Một database quan hệ duy nhất là điểm khởi đầu của hầu hết sản phẩm. Đến một lúc nó không chịu nổi lượng ghi, dữ liệu không còn vừa một máy, hoặc một sự cố ở DB đó làm sập mọi tính năng.
- Stream processing Chủ đề Thành viên
Khi batch hằng ngày hay hằng giờ không còn đủ tươi (chi tiêu quảng cáo phải dừng đúng lúc chạm ngân sách, dashboard MRR không được trễ 24 giờ, alert phải bắn khi contest sắp đầy), hệ phải tính liên tục trên luồng sự…
- Tách compute khỏi storage Chủ đề Thành viên
Hệ có trạng thái kiểu cổ điển (database, broker Kafka, fileserver Git) đặt dữ liệu bền trên đĩa của chính máy xử lý. Máy đó vừa là compute vừa là storage, nên:
- Xác thực và phân quyền (authn/authz) Chủ đề Thành viên
Ở monolith, mỗi dữ liệu thường chỉ có một đường vào, nên kiểm tra quyền nằm ngay đó: một hàm hasaccess?, một API mỗi resource. Khi hệ thống tách thành nhiều service, nhiều client, nhiều loại token, cả hai nửa đều vỡ:
- How we built the Internal Data Warehouse at ClickHouse Bài tóm tắt · ClickHouse · 2023
…đích, để dùng lại phần tăng mà không quét lại bảng đích. - Idempotent: hầu hết bảng dùng ReplicatedReplacingMergeTree (cùng khoá thì giữ bản cuối), nên nạp lại một giờ bao nhiêu l…
- 6 Event-Driven Architecture Patterns — Part 2 Bài tóm tắt · Wix · 2020
…từ một bài của Uber. 5. Events in Transactions (khi khó làm idempotent): - luồng mua hàng: Payments phát Order Purchase Completed → Checkout consume và phát Order Checkout Complete…
- Avoiding Double Payments in a Distributed Payments System Bài tóm tắt · Airbnb · 2019
…trạng thái hỏng, nên client phải thông minh hơn và API phải idempotent (chuyển tiền nhiều nhất một lần). - Yêu cầu: giải pháp chung cho nhiều service; latency cực thấp nên không là…
- Doximity Công ty Thành viên
Mọi app Rails dùng Kafka qua gem nội bộ dox-messaging. Năm 2022 họ thay ruby-kafka (heartbeat chung thread, gây rebalancing storm) bằng rdkafka trên librdkafka mà giữ nguyên interface; qua đợt segfault khi rollout,…
- Billing and Payment Platform Bài tóm tắt · Grammarly · 2023
…circuit breaker, DLQ để điều tra message lỗi, xử lý message idempotent để retry không gây tác dụng phụ, rate limiting để một service không kéo sập billing của mọi service, timeout,…
- Database-per-User Architecture With Isolated Application Environments Bài tóm tắt · Neon · 2024
…(1.0.1 lên 1.2.0 phải đi qua dòng 1.1.x) và viết migration idempotent (kiểm cột, kiểu, ràng buộc trước khi sửa), để một thay đổi đã có qua bản vá không làm hỏng lần nâng cấp sau.…
- The feedback loops behind Kubernetes Bài tóm tắt · PlanetScale · 2026
…r version, migrate dữ liệu; phải biến hành động chặn, không idempotent thành idempotent. - "Operator không gỡ bỏ độ phức tạp, chúng dời nó vào code mà ai đó phải hiểu." Không cần q…
- Automated Infrastructure Cost Optimization at Scale with AWS EC2 Reserved Instances Bài tóm tắt · Quora · 2018
…ịnh kỳ nên không mô phỏng offline được ; có độ trễ và không idempotent . - t2.nano làm "tiền trung gian": đổi RI thừa sang t2.nano trước, rồi từ t2.nano sang loại đích; chi phí mỗi…
- AWS Multi-Account Architecture with Terraform, Yeoman, and Jenkins Bài tóm tắt · Slalom Build · 2018
…kinsfile); ưu tiên Terraform khi có resource gốc (khai báo, idempotent), không thì script Python SDK viết idempotent. Metadata mọi tài khoản ghi vào một bảng DynamoDB để script và…
- Roshi: a CRDT system for timestamped events Bài tóm tắt · SoundCloud · 2014
…trên máy thường. - Dùng CRDT (thao tác kết hợp, giao hoán, idempotent) để có nhất quán cuối khi lỗi mà không phải tự lo điều phối phức tạp: một kiểu set gần LWW-element-set có dọn…
- Business Continuity & Disaster Recovery in the Microservices world Bài tóm tắt · Walmart · 2019
…dưới tự dựng lại trạng thái. Yêu cầu bắt buộc: mọi consumer idempotent (vốn cần vì broker chỉ at-least-once). - Monitor hai tầng: worker trong mỗi Ring gom health check chuẩn hoá (…
- Allegro Công ty Thành viên
Allegro (Ba Lan) đi từ 3 developer với dữ liệu lưu trong file (1999) → scale bằng tự viết cache, connection pool, search engine bằng C trên Oracle (~2005) → framework tự chế trong cùng codebase (2008–2009, code mới vẫn…
- ClickHouse Công ty Thành viên
ClickHouse Cloud có thêm Postgres managed, và với dịch vụ đó WAL archival là thứ bảo đảm khôi phục được. Năm 2026, khi đưa Postgres vào môi trường ít tài nguyên, họ viết lại WAL-G (Go) thành WAL-RUS (Rust) để bộ nhớ dự…
- How Coinbase built a governed platform for internal operations Bài tóm tắt · Coinbase · 2026
…ề xuất khỏi thực thi cho cùng lúc điểm duyệt, bước thực thi idempotent và audit cả yêu cầu lẫn hành động. - Hai rate limiter: một giới hạn số khách khác nhau một caller chạm tới tr…
- Announcing Deno Queues Bài tóm tắt · Deno · 2023
…relay riêng (). Bài học cho SWE - At-least-once đòi handler idempotent; ở đây dùng chính giao dịch của kho để ghi nhận "đã xử lý". - Kiểm hành vi khi hết lượt retry: mặc định bỏ me…
- Discord Công ty Thành viên
Hiếm có công ty nào kể cùng một bài toán qua 6 năm như Discord. Năm 2015 họ cố ý dùng một replica set MongoDB để ra sản phẩm trong 2 tháng, kèm đường thoát. Họ phân tích workload rồi chuyển sang Cassandra 12 node với…
- How Discord Automates ScyllaDB Clusters at Scale Bài tóm tắt · Discord · 2026
…e, cụm bình thường) chạy mỗi lần, ai gọi cũng vậy. Bắt buộc idempotent để retry an toàn. Condition là task chờ trạng thái (ví dụ compaction về mức bình thường) bằng cách poll API S…
- 5-year Evolution of Ele.me's Transaction System - Part 2 Bài tóm tắt · Ele.me · 2020
…bộ dữ liệu (cần thêm thì gọi API tra ngược); consumer phải idempotent; mỗi queue tối đa 10.000 message tồn. - Bản thiết kế viết lại bằng Java bị architecture review bác (9/2015).…
- 5-year Evolution of Ele.me's Transaction System - Part 6 Bài tóm tắt · Ele.me · 2020
…n thiết qua kênh realtime, đổi từ message sang RPC có token idempotent + consumer kéo bù . Lý do: hai data center (nền tảng và logistics) ở hai thành phố, gọi xuyên DC nhiều lần là…
- AWS Lessons Learned for Data Processing Pipelines Bài tóm tắt · Expedia · 2016
…sibility timeout, at-least-once là mặc định : consumer phải idempotent, timeout đặt theo thời gian xử lý tệ nhất, hoặc gia hạn theo message (). - Database tính tiền theo capacity đ…
- Inside Stream's Real-Time Architecture for Trading & Investing Apps Bài tóm tắt · Stream (GetStream) · 2026
…cả hai đầu. Bài học cho SWE - Tách đường "đúng" (giao dịch, idempotent, có thứ tự) khỏi đường "phân phối" (fan-out, chịu được trễ nhỏ); đường phân phối không bao giờ quyết định trạ…