Tìm kiếm
25 kết quả cho “connector”. Tìm không phân biệt dấu.
- The end of credential sprawl for agents Bài tóm tắt · Vercel · 2026
…n vấn đề lớn hơn. - Xin token lúc chạy thay vì lưu: đăng ký connector (Slack, GitHub, Snowflake, OAuth riêng...) một lần, gắn vào project và môi trường; code gọi getToken khi cần,…
- Fleet Management at Spotify (Part 2): The Path to Declarative Infrastructure Bài tóm tắt · Spotify · 2023
…manifest qua plugin Backstage nhập resource sẵn có (Config Connector), plugin sinh manifest theo best practice, plugin IDE. - Quyền mặc định của user chỉ là đọc; sửa/xoá qua cơ ch…
- Event-driven, message queue và Kafka Chủ đề Thành viên
Khi một hệ có nhiều bên cần biết "có gì vừa xảy ra" (đơn hàng đổi trạng thái, tin đăng được sửa, ticket được cập nhật), synchronous call từng bên một làm producer phải biết mọi consumer, và một consumer chậm kéo chậm cả…
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một data…
- Bảo mật hạ tầng và quản lý secret Chủ đề Thành viên
Khi hệ thống lớn lên, số credential (mật khẩu DB, API key, SSH key, token, cookie phiên) tăng theo số service, pipeline, nhà cung cấp, và chúng rải vào code, cấu hình, hệ build, log. Các nguồn trong wiki cho thấy kẻ tấn…
- Failover, replica và dự phòng dữ liệu Chủ đề Thành viên
Mọi hệ có trạng thái đều giữ nhiều bản (replica) để một máy chết không làm mất dịch vụ. Khó không nằm ở việc có bản sao mà ở lúc chuyển sang bản sao:
- Load test và kiểm chứng capacity Chủ đề Thành viên
Trước một mốc tải chưa từng gặp (ra mắt game, tính năng mới gửi push toàn quốc, mùa giải, tăng trưởng nhanh), cần biết hệ chịu được bao nhiêu, cái gì gãy trước, và cần bao nhiêu máy. Test từng service riêng không đủ vì…
- Data Mesh — A Data Movement and Processing Platform @ Netflix Bài tóm tắt · Netflix · 2022
…ữ liệu giữa các hệ của Netflix: nguồn không chỉ là DB, thêm connector (CockroachDB, Cassandra ngoài MySQL/Postgres qua DBLog), thêm phép xử lý (filter, projection, union, join). -…
- Postgres High Availability with CDC Bài tóm tắt · PlanetScale · 2025
…hái tạm; buộc failover thì luồng CDC gãy, phải khởi tạo lại connector và snapshot lại; 2. thay replica (basebackup mới): replica mới chưa đủ điều kiện cho tới lần poll tiếp của CDC…
- From Batch Snapshots to Near-Real-Time Data Bài tóm tắt · Doximity · 2026
…đầu (chế độ no data : chỉ lấy schema). Snapshot ban đầu của connector có thể global/table lock thoáng qua và quét mọi dòng trong một giao dịch repeatable-read trên DB ứng dụng. Tha…
- DBLog: A Generic Change-Data-Capture Framework Bài tóm tắt · Netflix · 2019
…tính và "non-stale read"; không khoá bảng. MySQL qua binlog connector, PostgreSQL qua replication slot + wal2json; phần dump dùng chung SQL/JDBC. - Output cắm được bất kỳ đâu (stre…
- Achievers Công ty Thành viên
Để mở rộng sang nhiều region với data residency và có failover giữa các cluster GKE, Achievers chuyển từ Kong sang Istio làm cả gateway lẫn service mesh (migration xong cuối 2020) và gặp một loạt vấn đề do sidecar .…
- Load Testing Kubernetes: Resolving bottlenecks and improving performance (Part 2) Bài tóm tắt · Achievers · 2023
…ại như một thử nghiệm âm tính. - Latency — code dùng chung: connector DB dùng lock để chuyển schema trước mỗi query, thêm latency cho mọi service dùng nó; sửa bằng ghi tên schema t…
- Designing Clear Street's First Transactional Outbox Pattern Bài tóm tắt · Clear Street · 2020
…i chưa kể incident hay chi phí vận hành (bảng outbox phình, connector lỗi, đổi schema); đó vẫn là phần thiếu. Liên quan - (outbox trong Postgres, ví dụ giả định) · (outbox chỉ được…
- ClickHouse Công ty Thành viên
ClickHouse Cloud có thêm Postgres managed, và với dịch vụ đó WAL archival là thứ bảo đảm khôi phục được. Năm 2026, khi đưa Postgres vào môi trường ít tài nguyên, họ viết lại WAL-G (Go) thành WAL-RUS (Rust) để bộ nhớ dự…
- TimescaleDB to ClickHouse replication: Use cases, features, and how we built it Bài tóm tắt · ClickHouse · 2025
…về CDC trên bảng partition vẫn có giá trị chung. Bối cảnh - Connector Postgres CDC của ClickPipes sao chép liên tục từ Postgres sang ClickHouse Cloud, dùng cho cả migrate một lần l…
- Building Scalable Real Time Analytics, Alerting and Anomaly Detection Architecture at Dream11 Bài tóm tắt · Dream11 · 2019
…rùng nên dùng chế độ file. - Ghi vào Elasticsearch qua sink connector, index theo tuần để dễ lưu trữ dữ liệu cũ; hỗ trợ upsert; mapping schema phải xử lý cẩn thận. - Alert bằng Ela…
- Making LinkedIn's Organic Feed Handle Peak Traffic Bài tóm tắt · LinkedIn · 2018
…mp 60+ GB mở bằng Eclipse MAT (Dominator Tree): Jetty ServerConnector giữ khoảng 7,5 GB, 500.000 request đang treo. - Queue quá lớn: request queue của Jetty đặt 5.000. Tính lại: cl…
- Netflix Công ty Thành viên
Incident hỏng DB năm 2008 dẫn tới 7 năm lên AWS theo hướng cloud-native . Bài kiểm tra lớn đầu tiên là incident AWS US-East năm 2011: kiến trúc stateless, nhiều zone, fallback chịu được, nhưng rút khỏi zone phải làm…
- Using Presto in our Big Data Platform on AWS Bài tóm tắt · Netflix · 2014
…kiến trúc DAG dạng streaming hợp với kiểu khám phá rời rạc; connector thân thiện Hadoop nên cắm được file system S3 (một tháng làm cùng Facebook là chạy thử); ANSI SQL; đã chạy pro…
- Enabling Multi-Region Data Systems at Notion Bài tóm tắt · Notion · 2026
…thay pipeline Flink tự quản (2022) bằng Snowpipe streaming connector managed. - Mẫu hình để dễ bảo trì: - bảng ánh xạ workspace → region (quan trọng khi dời workspace giữa region)…
- A Trillion Transactions Bài tóm tắt · TigerBeetle · 2026
…hiết kế cho số nguyên và đếm thay vì chuỗi) mở rộng LSM với connector xuống object storage. Cluster demo: NVMe cục bộ + object storage, nửa petabyte flash. Bài học cho SWE - Đặt th…
- Simplifying Data and Product Integrations with a Data Abstraction Layer Bài tóm tắt · Uber · 2026
…o bên thứ ba; DAL đã mở rộng ra ngoài Ads. Hướng tiếp: thêm connector DB, request bất đồng bộ cho dữ liệu lớn, decorator làm điểm mở rộng có kiểm soát. Vì sao - Mượn cách lập trình…
- Integrated Commerce and our Merchant Center rebuild Bài tóm tắt · Zalando · 2016
…a hàng truyền thống nối qua interface riêng do team Fashion Connector ở Helsinki làm. Thay đổi chính (kế hoạch) - Thay bằng interface chung theo hướng chuyển từ shop monolith sang…
- From Homegrown to Flink: Migrating a Stateful Ad Event Join at Scale Bài tóm tắt · Zalando · 2026
…chỉnh RocksDB (buffer, compaction, dọn sau rescale, nén). - Connector Kinesis không đọc được event gộp theo Protobuf nên phải tự viết. Hai consumer cùng đọc một stream bị lỗi throu…