Tìm kiếm
40 kết quả cho “Data model”. Tìm không phân biệt dấu.
- Scaling Etsy Payments with Vitess: Part 1 – The Data Model Bài tóm tắt · Etsy · 2023
…m/codeascraft/scaling-etsy-payments-with-vitess-part-1--the-data-model) Bối cảnh - Cuối 2020, hai database thanh toán đã ở cấu hình máy cao nhất của Google Cloud, không scale dọc đ…
- Can you use autoregressive diffusion to generate market data? Bài tóm tắt · Jane Street · 2026
…com/can-you-use-autoregressive-diffusion-to-generate-market-data/) Bài nghiên cứu (dự án thực tập), không phải hệ đang chạy production. Wiki giữ vì nó cho thấy cách một quỹ định lư…
- Scaling beyond one: How Airbnb evolved its data architecture for a multi-product world Bài tóm tắt · Airbnb · 2025
…ech/uncategorized/scaling-beyond-one-how-airbnb-evolved-its-data-architecture-for-a-multi-product-world/) Bối cảnh - Bản Summer Release (5/2025): Airbnb thiết kế lại app, làm lại E…
- Member Transaction History: Data Store Selection Journey Bài tóm tắt · Walmart · 2019
…việc với Microsoft Phân tích, tổng hợp phức tạp (streaming) Databricks, Stream Analytics Databricks Spark, nhiều ngôn ngữ Lọc theo metadata, phân trang Cosmos, Azure Search, Azure…
- Flex Model: an event-driven feature engineering system Bài tóm tắt · Jane Street · 2026
Nhiều chiến lược giao dịch của Jane Street dùng mạng nơ-ron, nhưng dữ liệu thị trường thô (lệnh được thêm vào sổ lệnh, lệnh huỷ, giao dịch khớp) phải biến thành feature trước. Ví dụ đơn giản: mid (giữa giá mua tốt nhất…
- DataHub: Popular metadata architectures explained Bài tóm tắt · LinkedIn · 2020
…bình — [bài gốc](https://engineering.linkedin.com/blog/2020/datahub-popular-metadata-architectures-explained) Bài khái niệm, viết bởi người dẫn dắt DataHub; xếp các hệ khác vào "th…
- Re-architecting Slack's Workspace Preferences: Moving to an EAV Model Bài tóm tắt · Slack · 2018
Thiết kế ban đầu: lưu tuỳ chọn của workspace dưới dạng một JSON blob ngay trong bảng workspaces (MySQL). Hợp lý khi Slack còn nhỏ.
- DataHub: A generalized metadata search & discovery tool Bài tóm tắt · LinkedIn · 2019
…bình — [bài gốc](https://engineering.linkedin.com/blog/2019/data-hub) Bối cảnh - WhereHows (mở mã nguồn 2016): kho metadata trung tâm cho dataset (schema, owner, lineage, job) kèm…
- Modeling Equities Returns: The Linear Case Bài tóm tắt · Hudson River Trading · 2023
Ở HRT nhiều team giao dịch tự duy trì model để hiểu rủi ro và hiệu quả của danh mục. Bài giới thiệu factor model: lợi suất của nhiều tài sản được giải thích bằng ít "nhân tố" chung.
- Deploying Large-scale Fraud Detection Machine Learning Models at PayPal Bài tóm tắt · PayPal · 2021
…sorFlow, MLflow. - Kết quả, theo PayPal: số PR của các team data science tăng 50% mỗi quý; thời gian phát triển và deploy model giảm 80%; không còn rollback hệ thống do model chạy…
- Evolving Reddit's ML Model Deployment and Serving Architecture Bài tóm tắt · Reddit · 2021
…L deploy model mới bằng cách commit một file cấu hình : metadata, đường dẫn artifact, schema (giá trị mặc định, nguồn feature), phiên bản image của model server, tài nguyên và auto…
- Maintaining Machine Learning Model Accuracy Through Monitoring Bài tóm tắt · DoorDash · 2021
…i log mọi dự đoán (kết quả, ID, giá trị feature, model) vào data warehouse: đủ để đào sâu một ca, không đủ để thấy bức tranh chung. Thay đổi chính - Hai hướng được cân nhắc: "unit…
- Lessons Learnt From Consolidating ML Models in a Large Scale Recommendation System Bài tóm tắt · Netflix · 2023
Hệ recommendation và search thường mọc ra một model riêng cho mỗi use case: notification (user→item), item liên quan (item→item), search (query→item), khám phá theo thể loại (category→item). Mỗi cái có pipeline offline…
- Serving Machine Learning Models Efficiently at Scale at Zillow Bài tóm tắt · Zillow · 2022
…rtifact); self.input / self.output chuyển thẳng sang Pandas DataFrame. Flow offline gọi online publish để deploy flow online, và truyền con trỏ base run tới artifact vừa train, nên…
- Amundsen — Lyft's data discovery & metadata engine Bài tóm tắt · Lyft · 2019
…Độ khó: Dễ — [bài gốc](https://eng.lyft.com/amundsen-lyfts-data-discovery-metadata-engine-62d27254fbb9) Bài giới thiệu sản phẩm nội bộ (về sau open source); kiến trúc được hẹn ở b…
- How HRT Thinks About Data Bài tóm tắt · Hudson River Trading · 2022
…s://www.hudsonrivertrading.com/hrtbeat/how-hrt-thinks-about-data/) Bài quan điểm của một researcher, không kể hệ thống. Wiki giữ vì đây là một trong số ít bài của một quỹ định lượn…
- A brief history of Notion's data catalog Bài tóm tắt · Notion · 2024
…gốc](https://www.notion.com/blog/a-brief-history-of-notions-data-catalog) Phần sinh mô tả bảng bằng LLM được tóm tắt ngắn; lõi của bài là đưa schema về nguồn (code) và lan metadata…
- LyftLearn: ML Model Training Infrastructure built on Kubernetes Bài tóm tắt · Lyft · 2021
…mình. Dữ liệu train từ warehouse (Hive, Presto, Spark); metadata model ở RDS Aurora; image ở ECR; dữ liệu tạm trên EFS gắn làm volume cho mỗi người. - Lúc viết: hàng chục team, hàn…
- Why market data is a deep learning challenge Bài tóm tắt · Optiver · 2026
…ốc](https://optiver.com/insights/technology-blog/why-market-data-is-a-deep-learning-challenge/) Bài của một quantitative researcher dẫn đầu nghiên cứu deep learning ở mảng HFT Mỹ c…
- Enabling Multi-Region Data Systems at Notion Bài tóm tắt · Notion · 2026
…[bài gốc](https://www.notion.com/blog/enabling-multi-region-data-systems-at-notion) Bối cảnh - Notion ra mắt data residency cho khách EU : dữ liệu khách được xử lý và lưu trong reg…
- How PayPal Uses Real-time Graph Database and Graph Analysis to Fight Fraud Bài tóm tắt · PayPal · 2021
…ps://medium.com/paypal-tech/how-paypal-uses-real-time-graph-database-and-graph-analysis-to-fight-fraud-96a2b918619a) Bài nói mô hình dữ liệu đồ thị trong ví dụ không phải mô hình p…
- Secure by default: WarpStream's BYOC deployment model Bài tóm tắt · WarpStream · 2024
…õ một hệ quả kiến trúc: tách compute/storage và dữ liệu/metadata thay đổi được mô hình quyền truy cập của nhà cung cấp. Bối cảnh - Hai mô hình triển khai hạ tầng dữ liệu quen thuộc…
- Migrating Data Ingestion Systems at Meta Scale Bài tóm tắt · Meta · 2026
…Nâng cao — [bài gốc](https://engineering.fb.com/2026/05/12/data-infrastructure/migrating-data-ingestion-systems-at-meta-scale/) Bối cảnh - Mỗi ngày, hệ ingestion của Meta cào tăng…
- How to shuffle a big dataset Bài tóm tắt · Jane Street · 2018
…[bài gốc](https://blog.janestreet.com/how-to-shuffle-a-big-dataset/) Bài thuật toán của một researcher, không kể hệ thống thay đổi. Wiki giữ vì nó cho thấy hình dạng dữ liệu huấn…
- How Render Workflows powers our internal data pipeline Bài tóm tắt · Render · 2026
…://render.com/blog/how-render-workflows-powers-our-internal-data-pipeline) Bài dùng sản phẩm của chính Render (Workflows, lúc đó đang beta). Phần kiến trúc pipeline vẫn có giá trị…
- Nền tảng ML (feature, training, serving, giám sát model) Chủ đề Thành viên
Model ML đầu tiên của một công ty thường được nhúng thẳng vào một service có sẵn, với feature tính trong vài script và train bằng một job riêng. Khi số model và số người làm model tăng, bốn chỗ cùng hỏng:
- Community-focused Feed optimization Bài tóm tắt · LinkedIn · 2019
…ang model, transformer từ SPR xuống FollowFeed. - Model là "data pack": model đóng gói thành multiproduct riêng chỉ gồm file tĩnh, deploy qua CI/CD như dữ liệu. Thời gian triển kha…
- From Batch Snapshots to Near-Real-Time Data Bài tóm tắt · Doximity · 2026
…oximity.com/articles/from-batch-snapshots-to-near-real-time-data) Bối cảnh - Doximity đã có pipeline batch chép định kỳ snapshot của DB ứng dụng vào warehouse (Snowflake): tin cậy,…
- How We Built Infrastructure to Run User Forecasts at Spotify Bài tóm tắt · Spotify · 2022
…au) → tự sinh tóm tắt và biểu đồ cho cả công ty. - Công cụ: Dataflow (Beam do Google quản lý) cho việc cần song song lớn; job Python đóng Docker chạy trên Kubernetes cho việc nhỏ.…
- Training Orchestrator: Unifying Model Training at Yelp Bài tóm tắt · Yelp · 2026
…hàm: loại step định nghĩa bằng schema input/output (step ra dataset nối với step cần dataset, step ra model nối với step cần model), và orchestrator kiểm schema giữa các step , nên…
- Diving into Uber's cutting-edge data infrastructure Bài tóm tắt · Onehouse · 2024
…https://www.onehouse.ai/blog/diving-into-ubers-cutting-edge-data-infrastructure) Nguồn thứ cấp: Onehouse (công ty do người tạo ra Hudi ở Uber lập) tóm tắt talk của Girish Baliga, D…
- Building Venice with Apache Helix Bài tóm tắt · LinkedIn · 2017
…mort Read-Only là nơi phục vụ dữ liệu dẫn xuất: Hadoop tính dataset (ví dụ xếp hạng kết nối cấp hai cho People You May Know) rồi đẩy nguyên batch bất biến lên để web server đọc. -…
- Halving the Time: How Uber Eats Rebuilt Its Search Pipeline Bài tóm tắt · Uber · 2026
…levance. - Quảng cáo: dữ liệu bid lưu dạng dòng lặp lại metadata cho mỗi bid, tốn serialize; chuyển sang dạng cột khớp mẫu truy cập khi chấm điểm, đưa dữ liệu quảng cáo (campaign,…
- How Facebook deals with PCIe faults to keep our data centers running reliably Bài tóm tắt · Meta · 2021
…rung bình — [bài gốc](https://engineering.fb.com/2021/06/02/data-center-engineering/how-facebook-deals-with-pcie-faults-to-keep-our-data-centers-running-reliably/) Bối cảnh - Data…
- How Discord Stores Billions of Messages Bài tóm tắt · Discord · 2017
Bản đầu của Discord được viết trong chưa tới 2 tháng (đầu 2015). Mọi thứ nằm trong một replica set MongoDB, và họ nói rõ là cố ý: làm nhanh để kiểm chứng sản phẩm, nhưng luôn chừa đường sang giải pháp bền hơn. Họ biết…
- Migrating Etsy's database sharding to Vitess Bài tóm tắt · Etsy · 2026
…[bài gốc](https://www.etsy.com/codeascraft/migrating-etsyas-database-sharding-to-vitess) Bối cảnh - Etsy shard MySQL từ khoảng 2010 : ~1.000 bảng trên ~1.000 shard, hơn 425 TB, ~1,…
- Designing MCP Gateway: Uber's MCP Management Platform Bài tóm tắt · Uber · 2026
…cấu hình cần chủ server duyệt, có rollback về bản trước. - Data plane (Proxy Gateway): đọc cấu hình từ control plane và làm mới trạng thái trong bộ nhớ theo chu kỳ, nên thay đổi c…
- Avoid pitfalls in scaling your Cassandra cluster: lessons and remedies Bài tóm tắt · Walmart · 2017
Nhiều team ở Walmart dùng Cassandra làm nguồn dữ liệu chính, đọc ghi hàng chục tới hàng trăm nghìn ops/giây. Theo bài, để tới được đó họ phải "quên" nhiều mẹo của thế giới RDBMS và chấp nhận schema trông "lạ" nhưng…
- How we built it: our new Articles feature for Stack Overflow for Teams Bài tóm tắt · Stack Overflow · 2020
Articles là loại nội dung dài mới trong Stack Overflow for Teams; phải hiện cùng câu hỏi/trả lời trong search, profile, thông báo theo tag, có vote và comment. Mỗi article có một "loại" (Knowledge Article, Announcement,…
- Introducing Espresso - LinkedIn's hot new distributed document store Bài tóm tắt · LinkedIn · 2015
…ER TABLE cần DBA; cấp thêm shard là việc tay; failover giữa data center (master/slave) cần DBA và có downtime; phần cứng và license đắt. - Năm 2011 team Distributed Data Systems ch…