Tìm kiếm
40 kết quả cho “data platform”. Tìm không phân biệt dấu.
- Data Mesh — A Data Movement and Processing Platform @ Netflix Bài tóm tắt · Netflix · 2022
…Độ khó: Trung bình — [bài gốc](https://netflixtechblog.com/data-mesh-a-data-movement-and-processing-platform-netflix-1288bcab2873) Bài tổng quan đầu của một series; chưa có số liệ…
- Using Presto in our Big Data Platform on AWS Bài tóm tắt · Netflix · 2014
…ài gốc](https://netflixtechblog.com/using-presto-in-our-big-data-platform-on-aws-938035909fd4) Bối cảnh - Nền big data của Netflix (2014) đặt data warehouse trên S3 : compute tách…
- Building a Data Streaming Platform Bài tóm tắt · Zillow · 2020
…ung bình — [bài gốc](https://www.zillow.com/tech/building-a-data-streaming-platform/) Bối cảnh Ba cách đưa dữ liệu vào data lake S3 trước đó, đều có vấn đề: - Sqoop job do team Dat…
- The data platform cluster operator service for Hadoop cluster management Bài tóm tắt · Twitter · 2023
…blog.x.com/engineering/en us/topics/infrastructure/2023/the-data-platform-cluster-operator-service-for-hadoop-cluster-management) Bối cảnh - Twitter dùng Apache Hadoop bản gốc, khô…
- How Stripe's document databases supported 99.999% uptime with zero-downtime data migrations Bài tóm tắt · Stripe · 2024
…hó — [bài gốc](https://stripe.dev/blog/how-stripes-document-databases-supported-99.999-uptime-with-zero-downtime-data-migrations) Bối cảnh - Stripe chọn MongoDB từ 2011 (Atlas chưa…
- The Data Infra Behind Zillow's 3x Growth in Experiment Volume Bài tóm tắt · Zillow · 2023
…khó: Trung bình — [bài gốc](https://www.zillow.com/news/the-data-infra-behind-zillows-3x-growth-in-experiment-volume/) Bối cảnh - Giữa 2020, gần 200 triệu người dùng unique mỗi thá…
- Data Mesh at Grab (Part III): Operationalizing data reliability with automated DPIs Bài tóm tắt · Grab · 2026
…Độ khó: Trung bình — [bài gốc](https://engineering.grab.com/data-mesh-at-grab-part-three) Phần 3 của series Data Mesh; hai phần trước (Signals Marketplace, công cụ chứng nhận) chưa…
- Chọn database theo workload Chủ đề Thành viên
Không có database tốt nhất, chỉ có database hợp với mẫu đọc/ghi ở một quy mô cụ thể. Mẫu đó thay đổi khi sản phẩm lớn lên. Ngoài ra, chuyên môn vận hành của đội cũng là một phần của "workload".
- Sharding và tách database Chủ đề Thành viên
Một database quan hệ duy nhất là điểm khởi đầu của hầu hết sản phẩm. Đến một lúc nó không chịu nổi lượng ghi, dữ liệu không còn vừa một máy, hoặc một sự cố ở DB đó làm sập mọi tính năng.
- Data fetching strategy for Mercari Global Marketplace web app Bài tóm tắt · Mercari · 2025
…gốc](https://engineering.mercari.com/en/blog/entry/20251120-data-fetching-strategy-for-mercari-global-marketplace-web-app/) Một bài trong series Global App (ngoài sheet). Lý do có…
- Apache Hudi at Uber: Engineering for Trillion-Record-Scale Data Lake Operations Bài tóm tắt · Uber · 2026
…om/us/en/blog/apache-hudi-at-uber/) Bối cảnh - Khoảng 2015, data lake chuẩn của ngành là file, chỉ append, batch. Workload quan trọng của Uber thì khác: dữ liệu thay đổi (vòng đời…
- Amundsen — Lyft's data discovery & metadata engine Bài tóm tắt · Lyft · 2019
…Độ khó: Dễ — [bài gốc](https://eng.lyft.com/amundsen-lyfts-data-discovery-metadata-engine-62d27254fbb9) Bài giới thiệu sản phẩm nội bộ (về sau open source); kiến trúc được hẹn ở b…
- A brief history of Notion's data catalog Bài tóm tắt · Notion · 2024
…gốc](https://www.notion.com/blog/a-brief-history-of-notions-data-catalog) Phần sinh mô tả bảng bằng LLM được tóm tắt ngắn; lõi của bài là đưa schema về nguồn (code) và lan metadata…
- Building a Pipeline to Process Clickstream Data Bài tóm tắt · Zillow · 2018
…https://www.zillow.com/tech/pipeline-to-process-clickstream-data/) Bối cảnh - Clickstream là một trong những dataset lớn nhất: gần một tỷ event/ngày , dataset lớn nhất khoảng 2 TB/…
- How we built our Internal Data Warehouse at ClickHouse: A year later Bài tóm tắt · ClickHouse · 2024
…ung bình — [bài gốc](https://clickhouse.com/blog/building-a-data-warehouse-with-clickhouse-part-2) Phần 2, viết một năm sau . Bài của nhà cung cấp về chính sản phẩm của họ; các nhậ…
- Image Migration to Google Cloud Platform Bài tóm tắt · trivago · 2024
…y. - Khởi đầu: framework PHP nội bộ, RabbitMQ, worker trong data center, mọi pipeline dùng chung một DB . - Lần 1 (2018), sang AWS: input tăng từ khoảng 100 lên gần 150 triệu ảnh;…
- Building Uber's Multi-Cloud Secrets Management Platform to Enhance Security Bài tóm tắt · Uber · 2025
…agement-platform/) Bối cảnh - Hơn 5.000 microservice, 5.000 database, hơn 500.000 job phân tích mỗi ngày, hơn 400 tích hợp nhà cung cấp và 400 ứng dụng SaaS; hơn 150.000 secret dùn…
- Postgres as Your Platform: Building Event-Driven Systems with Schema Changes Bài tóm tắt · Neon · 2025
…chính - Theo Neon, đội platform thường dựng giàn giáo quanh database (message queue để phát thay đổi, cron đồng bộ schema, webhook báo hệ phía sau). Postgres đã có sẵn đủ thứ để th…
- How we built a secure, performant, multi-tenant cloud platform to run untrusted code Bài tóm tắt · Deno · 2024
…ầu trong vài giây, giá rẻ. Thay đổi chính - Control plane / data plane: control plane lo tạo và quản lý deployment, tài khoản, metering, billing, dashboard; data plane gồm mọi edge…
- DBLog: A Generic Change-Data-Capture Framework Bài tóm tắt · Netflix · 2019
…bài gốc](https://netflixtechblog.com/dblog-a-generic-change-data-capture-framework-69351fb9099b) Bối cảnh - Nền tảng Delta của Netflix giữ nhiều kho dữ liệu đồng bộ: một kho là ngu…
- Building visibility into a CI platform Bài tóm tắt · Optiver · 2026
…kiến. - CI thành nền tảng thí nghiệm: mỗi build C++ ghi metadata môi trường (phiên bản Linux, compiler, công cụ build) thành artifact; nạp vào để phân tích hiệu năng build theo môi…
- Atlas: Our journey from a Python monolith to a managed platform Bài tóm tắt · Dropbox · 2021
…phẩm nằm trong monolith, các thành phần nền (xác thực, metadata, filesystem, sync) đã tách thành service. Hơn 700 triệu người dùng đăng ký, ít nhất 300.000 request/giây. - Vấn đề:…
- Zero Sum by Design: 10 Years of Uber's Payments Platform Bài tóm tắt · Uber · 2026
Gulfstream bắt đầu năm 2016 trong một phòng họp, với một nhóm nhỏ dựng bộ microservice nền; mười năm sau nhiều service đó vẫn chạy. Cùng thời gian, tổng giá trị đặt chỗ hằng năm của Uber từ 50 lên 217 tỉ USD; nền tảng…
- Evolution and Scale of Uber's Delivery Search Platform Bài tóm tắt · Uber · 2026
…ra lúc phục vụ: index ghi model ID của cả hai cột trong metadata; trên request lấy mẫu, service so model sinh query embedding với model ID của cột đang dùng; lệch thì phát metric l…
- Designing MCP Gateway: Uber's MCP Management Platform Bài tóm tắt · Uber · 2026
…cấu hình cần chủ server duyệt, có rollback về bản trước. - Data plane (Proxy Gateway): đọc cấu hình từ control plane và làm mới trạng thái trong bộ nhớ theo chu kỳ, nên thay đổi c…
- How to Pitch Apache Kafka Bài tóm tắt · Zillow · 2020
…ech/how-to-pitch-apache-kafka/) Bài quan điểm của một kỹ sư Data Platform về cách thuyết phục lãnh đạo đầu tư Kafka; phần về Zillow là quyết định lập team Streaming Platform. Các s…
- From Batch Snapshots to Near-Real-Time Data Bài tóm tắt · Doximity · 2026
…oximity.com/articles/from-batch-snapshots-to-near-real-time-data) Bối cảnh - Doximity đã có pipeline batch chép định kỳ snapshot của DB ứng dụng vào warehouse (Snowflake): tin cậy,…
- モジュラモノリスの品質を支えるリーダビリティチーム ― AI時代のスケーラブルなコード管理 (Readability team for a modular monolith in the AI era) Bài tóm tắt · Mercari · 2025
…o CI, ví dụ guideline thiết kế schema PostgreSQL (soạn cùng Database Reliability Engineer) viết thành plugin SQLFluff. - Truyền feature flag trong modular monolith: Experiment Plat…
- Research at scale: Orchestrating ML for systematic trading Bài tóm tắt · Optiver · 2025
…chuỗi cung ứng); on-prem + tràn sang cloud lúc đỉnh (vướng data gravity : chuyển hay nhân bản hàng trăm PB chậm và đắt; bản sao trễ hoặc hỏng cho kết quả khác; môi trường lệch nha…
- How Zillow Tests Clickstream Analytics Bài tóm tắt · Zillow · 2020
…ào trang, gửi Google Analytics, rồi được kéo từ BigTable về data lake (bảng Hive). Zillow chưa có schema chung cho event. - Dev đổi tên event (đổi chữ hoa, đổi cách gọi), xoá tính…
- How Coinbase built a governed platform for internal operations Bài tóm tắt · Coinbase · 2026
Support, vận hành, compliance, pháp lý, risk và engineer đều cần đọc/ghi dữ liệu khách hàng, mỗi nhóm một lý do chính đáng. Để tự nhiên thì công cụ admin sinh sôi, mỗi công cụ tự làm authorization, audit và rate limit.
- Deployment At Scale: Dream11's In-House Blue-Green Deployment Platform "OneClick" Bài tóm tắt · Dream11 · 2022
…ive, Eligible (green) cùng tài nguyên gắn kèm; lưu JSON metadata lên S3 để dùng khi rollback. 2. Dọn trước khi deploy: gỡ EC2, launch template, ASG cũ còn dính vào green. 3. Làm ấm…
- From SSH to REST: A Security-Driven Modernization of Slack’s EMR Data Pipelines Bài tóm tắt · Slack · 2026
…m-ssh-to-rest-a-security-driven-modernization-of-slacks-emr-data-pipelines/) Bối cảnh - Data platform của Slack dựng khoảng 2017 theo cách đơn giản: Airflow cần chạy job trên cụm E…
- How we build a robust analytics platform using Spark, Kafka and Cassandra Bài tóm tắt · Walmart · 2018
Người dùng nghiệp vụ cần dashboard mức độ còn hàng (item availability) tổng hợp ở các địa điểm then chốt, không theo dõi được từng SKU.
- Garbage Collection Optimization for High-Throughput and Low-Latency Java Applications Bài tóm tắt · LinkedIn · 2014
…-java-applications) Bối cảnh - Khi dựng thế hệ mới của feed data platform (index cập nhật từ member, company, group để phục vụ feed), team làm prototype gần đủ chức năng, chạy lại…
- From One Horizontal Scaling Controller to Many: Evolving Uber's Compute Platform Bài tóm tắt · Uber · 2026
…- Container Platform của Uber (2026): hơn 100 cụm compute ở data center và cloud (Oracle, Google), khoảng 4.000 service trên 3 triệu core, 1,5 triệu lần khởi động pod mỗi ngày. Up…
- Designing AI-Driven User Memory for Personalization Bài tóm tắt · Zillow · 2025
…ộ lọc và cập nhật trạng thái trong vài giây qua bảng Online Data Platform, mô hình nhẹ trong phiên, trigger theo sự kiện. - Hai đường xử lý riêng nhưng cùng logic mô hình với tham…
- The Story of Apollo – Amazon's Deployment Engine Bài tóm tắt · Amazon · 2014
…t), còn ứng dụng của Amazon chạy trên đội máy lớn qua nhiều data center , không được downtime, nên phải xếp thứ tự cập nhật khi máy đang nhận traffic và xử lý đúng mọi kiểu lỗi. Th…
- How we rolled out our own permissions DSL at Figma Bài tóm tắt · Figma · 2024
…c khỏi nạp dữ liệu: từ policy suy ra tĩnh các bảng/cột cần; DatabaseLoader suy ra dòng nào từ context path của resource và user. Engine toàn quyền chọn thứ tự, replica hay primary,…
- DrP: Meta's Root Cause Analysis Platform at Scale Bài tóm tắt · Meta · 2025
…rung bình — [bài gốc](https://engineering.fb.com/2025/12/19/data-infrastructure/drp-metas-root-cause-analysis-platform-at-scale/) Bài tóm tắt một paper (arXiv 2512.04250). Chủ yếu…