Tìm kiếm
40 kết quả cho “Log pipeline”. Tìm không phân biệt dấu.
- Our Journey to a Near Perfect Log Pipeline Bài tóm tắt · Salesforce · 2017
…://engineering.salesforce.com/our-journey-to-a-near-perfect-log-pipeline-6ae2f80cf7a0) Bối cảnh - Log của ứng dụng lõi Salesforce trong các data center phục vụ nhiều nhóm (Product…
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- The Log: What every software engineer should know about real-time data's unifying abstraction Bài tóm tắt · LinkedIn · 2013
…ài gốc](http://engineering.linkedin.com/distributed-systems/log-what-every-software-engineer-should-know-about-real-time-datas-unifying) Bài luận dài của Jay Kreps (khi đó ở Linked…
- Fly Behind The Scenes: Fresh Logging Bài tóm tắt · Fly.io · 2020
…0 · 2. Tăng trưởng · Độ khó: Dễ — [bài gốc](https://fly.io/blog/fly-behind-the-scenes-fresh-logging/) Bài phỏng vấn ngắn người làm dự án; ít số liệu. Bối cảnh - Fly.io gom log của…
- A Smarter Way to Deploy Data Pipelines Bài tóm tắt · Doximity · 2025
…025 · 2. Tăng trưởng · Độ khó: Dễ — [bài gốc](https://technology.doximity.com/articles/a-smarter-way-to-deploy-data-pipelines) Bối cảnh - Gần 20 team dữ liệu của Doximity dùng Airf…
- Structured Logging with slog Bài tóm tắt · Go · 2023
…23 · 3. Quy mô lớn · Độ khó: Dễ — [bài gốc](https://go.dev/blog/slog) Bài của đội Go về một API thư viện chuẩn, không phải hệ thống production; giữ lại vì kể cách một hệ sinh thái…
- DBLog: A Generic Change-Data-Capture Framework Bài tóm tắt · Netflix · 2019
…y mô lớn · Độ khó: Nâng cao — [bài gốc](https://netflixtechblog.com/dblog-a-generic-change-data-capture-framework-69351fb9099b) Bối cảnh - Nền tảng Delta của Netflix giữ nhiều kho…
- How We Rebuilt Our Log Storage and Search Infrastructure for Scale Bài tóm tắt · Railway · 2022
…2022 · 2. Tăng trưởng · Độ khó: Cơ bản — [bài gốc](https://blog.railway.com/p/building-logs-v2) Bài ngắn; phần đọc và stream log chỉ được tóm tắt. Bối cảnh - Đầu 2022, hơn 500.000…
- Fast and flexible observability with canonical log lines Bài tóm tắt · Stripe · 2019
…3. Quy mô lớn · Độ khó: Dễ — [bài gốc](https://stripe.com/blog/canonical-log-lines) Bối cảnh - Log có cấu trúc ( key=value ) linh hoạt hơn metric (metric và dashboard phải thiết k…
- Robinhood Swaps Kafka for WarpStream to Tame Logging Workloads and Costs Bài tóm tắt · WarpStream · 2025
…Độ khó: Trung bình — [bài gốc](https://www.warpstream.com/blog/robinhood-swaps-kafka-for-warpstream-to-tame-logging-workloads-and-costs) Nhà cung cấp viết lại talk của hai enginee…
- A brief history of Notion's data catalog Bài tóm tắt · Notion · 2024
…ớn · Độ khó: Trung bình — [bài gốc](https://www.notion.com/blog/a-brief-history-of-notions-data-catalog) Phần sinh mô tả bảng bằng LLM được tóm tắt ngắn; lõi của bài là đưa schema…
- How Render Workflows powers our internal data pipeline Bài tóm tắt · Render · 2026
…· 1. Khởi đầu · Độ khó: Dễ — [bài gốc](https://render.com/blog/how-render-workflows-powers-our-internal-data-pipeline) Bài dùng sản phẩm của chính Render (Workflows, lúc đó đang b…
- Centralized Application Logging at eBay (CAL Ingress) Bài tóm tắt · eBay · 2019
…atency-and-high-throughput-cal-ingress/) Bối cảnh - CAL gom log cục bộ của các application server về một chỗ và làm báo cáo cho mọi mảng của eBay. CAL Ingress nhận log từ hàng nghì…
- An inside look at LinkedIn's data pipeline monitoring system Bài tóm tắt · LinkedIn · 2019
…ó: Trung bình — [bài gốc](https://engineering.linkedin.com/blog/2019/an-inside-look-at-linkedins-data-pipeline-monitoring-system-) Bối cảnh - Dữ liệu vào Hadoop chủ yếu qua Apache…
- Why isn't all test automation run on the pipeline? Bài tóm tắt · Slalom Build · 2019
…hưng sửa đâu vỡ đó. Refactor thành module storage, business logic, background, UI, giữ UI test làm lưới an toàn và thêm module test; mất khoảng hai tháng. Vì sao - Lỗi bắt ở nguồn…
- Building an Effective Test Pipeline in a Service Oriented World Bài tóm tắt · Airbnb · 2020
…g test rất lâu (một test chạm nhiều service, không biết xem log ở đâu). - Phản hồi chậm (đợi lâu mới biết chỉ là một service không khởi động được vì config sai). - Khó scale; ngược…
- Running an automated test pipeline for the League client update Bài tóm tắt · Riot Games · 2016
…. Quy mô lớn · Độ khó: Trung bình — [bài gốc](https://technology.riotgames.com/news/running-automated-test-pipeline-league-client-update) Bối cảnh - Client cũ của League of Legends…
- Halving the Time: How Uber Eats Rebuilt Its Search Pipeline Bài tóm tắt · Uber · 2026
…Độ khó: Trung bình — [bài gốc](https://www.uber.com/us/en/blog/uber-eats-search-pipeline/) Bối cảnh - Latency search của Uber Eats đã tăng tới mức không chấp nhận được. Ba nguyên…
- How We Replaced Our Data Pipeline With Zero Downtime Bài tóm tắt · Twilio · 2014
…khác biệt, chỉ trả kết quả bản ổn định. Họ chạy shadow topology mới khoảng một tháng . 2. Account Flags: bit trong DB quyết định request đi đường code nào, để bật dần theo khách.…
- Who Watches the Watchmen? Keeping an Eye on Our Monitoring Systems Bài tóm tắt · Mercari · 2022
…Độ khó: Dễ — [bài gốc](https://engineering.mercari.com/en/blog/entry/20220805-who-watches-the-watchmen-keeping-an-eye-on-our-monitoring-systems/) Bài của team Security Engineering…
- The Legends of Runeterra CI/CD Pipeline Bài tóm tắt · Riot Games · 2021
…Tăng trưởng · Độ khó: Trung bình — [bài gốc](https://technology.riotgames.com/news/legends-runeterra-cicd-pipeline) Pipeline của một game (client Unity + game server). Wiki giữ ph…
- Twitter Sparrow tackles data storage challenges of scale Bài tóm tắt · Twitter · 2022
…2022 · 3. Quy mô lớn · Độ khó: Cơ bản — [bài gốc](https://blog.x.com/engineering/en us/topics/infrastructure/2022/twitter-sparrow-tackles-data-storage-challenges-of-scale) Bối cản…
- Near real-time features for near real-time personalization Bài tóm tắt · LinkedIn · 2022
…ó: Trung bình — [bài gốc](https://engineering.linkedin.com/blog/2022/near-real-time-features-for-near-real-time-personalization) Bối cảnh - Pipeline feature thông thường: event Kaf…
- From SSH to REST: A Security-Driven Modernization of Slack’s EMR Data Pipelines Bài tóm tắt · Slack · 2026
…g vào cụm, phải phân phối và xoay vòng key, audit phải ghép log nhiều nơi, phân quyền phức tạp. - Vận hành: job chạy ngay trên master node nên tranh tài nguyên; pod Kubernetes của…
- Scaling our security detection pipeline with Sigma Bài tóm tắt · Monzo · 2022
…mô lớn · Độ khó: Trung bình — [bài gốc](https://monzo.com/blog/2022/08/05/scaling-our-security-detection-pipeline-with-sigma) Bối cảnh - Kiểm soát bảo mật gồm phòng ngừa (mật khẩu…
- Open Sourcing Coinbase's Secure Deployment Pipeline (Odin) Bài tóm tắt · Coinbase · 2018
…· 2. Tăng trưởng · Độ khó: Trung bình — [bài gốc](https://blog.coinbase.com/open-sourcing-coinbases-secure-deployment-pipeline-ae6c78e25517) Bài cũ của blog.coinbase.com (Medium),…
- How we reduced our CI YAML files from 1800 lines to 50 lines Bài tóm tắt · Grab · 2022
Cauldron là đội nền tảng ML của Grab. Sản phẩm MerLin Pipelines cho mỗi team một repo chứa các pipeline ML; mỗi pipeline một thư mục con, mỗi thư mục chia thành stage (ví dụ phục vụ model qua Catwalk). Họ dựa vào rules…
- Scaling our Observability platform beyond 100 Petabytes by embracing wide events and replacing OTel Bài tóm tắt · ClickHouse · 2025
…uy mô lớn · Độ khó: Khó — [bài gốc](https://clickhouse.com/blog/scaling-observability-beyond-100pb-wide-events-replacing-otel) Bài của nhà cung cấp về hệ log nội bộ (LogHouse, giám…
- From Batch Snapshots to Near-Real-Time Data Bài tóm tắt · Doximity · 2026
…026 · 3. Quy mô lớn · Độ khó: Khó — [bài gốc](https://technology.doximity.com/articles/from-batch-snapshots-to-near-real-time-data) Bối cảnh - Doximity đã có pipeline batch chép đị…
- Evaluating MySQL Parallel Replication Part 3: Benchmarks in Production Bài tóm tắt · Booking.com · 2015
…n đuổi kịp 24 giờ transaction thật . - Thay đổi cấu hình binlog (intermediate master có log-slave-updates ; slave có binlog; slave không binlog), độ bền (cao: sync binlog=1 , innod…
- Evaluating MySQL Parallel Replication Part 2: Slave Group Commit Bài tóm tắt · Booking.com · 2015
…it trên master để nhiều transaction vào chung một nhóm ( binlog commit wait count / binlog commit wait usec ở MariaDB, binlog group commit sync delay / ... no delay count ở MySQL):…
- Data Mesh — A Data Movement and Processing Platform @ Netflix Bài tóm tắt · Netflix · 2022
…mô lớn · Độ khó: Trung bình — [bài gốc](https://netflixtechblog.com/data-mesh-a-data-movement-and-processing-platform-netflix-1288bcab2873) Bài tổng quan đầu của một series; chưa c…
- Beyond synthetic testing: Capturing and replaying real database workloads at Airbnb Bài tóm tắt · Airbnb · 2026
…capture cũ mượn từ pipeline observability: mỗi ngôn ngữ tự log query vào Kafka, mỗi use case tự xử lý, replayer riêng. Bảo trì nặng, chủ sở hữu mơ hồ, và thiếu ngữ cảnh giao dịch…
- DataHub: Popular metadata architectures explained Bài tóm tắt · LinkedIn · 2020
…ó: Trung bình — [bài gốc](https://engineering.linkedin.com/blog/2020/datahub-popular-metadata-architectures-explained) Bài khái niệm, viết bởi người dẫn dắt DataHub; xếp các hệ khá…
- Data Mesh at Grab (Part II): The foundational tools behind certification Bài tóm tắt · Grab · 2026
…t, stream, thuộc tính và metric. Thay đổi chính Hubble: catalog và lớp quản trị - Xây trên DataHub mã nguồn mở, dùng từ 2022, mở rộng nhiều nhưng liên tục rebase lên bản mới của up…
- DuckLake v1.0: The Lakehouse Format Built on SQL Reaches Production-Readiness Bài tóm tắt · DuckDB Labs · 2026
…abs, metadata của lakehouse nên nằm trong một database (catalog) chứ không rải thành file trên object storage như Iceberg và Delta. Catalog là bất kỳ hệ nào nói SQL, có primary key…
- GoCD on Kubernetes Bài tóm tắt · Disney Hotstar · 2020
…0 · 3. Quy mô lớn · Độ khó: Trung bình — [bài gốc](https://blog.hotstar.com/gocd-on-kubernetes-a4d90212d5f4) Toàn văn lấy từ bản Wayback (2021-07-15). Cùng năm với (chuyển workload…
- How we built Stripe Credits: A programmable, auditable way to pay your Stripe fees Bài tóm tắt · Stripe · 2026
…mô lớn · Độ khó: Trung bình — [bài gốc](https://stripe.dev/blog/how-we-built-stripe-credits-a-programmable-auditable-way-to-pay-your-stripe-fees) Bài về một tính năng tài chính; ph…
- Taming the ML Firehose: Scaling Feature Consistency Bài tóm tắt · Uber · 2026
…ô lớn · Độ khó: Khó — [bài gốc](https://www.uber.com/us/en/blog/taming-ml-firehose/) Bối cảnh - Mục tiêu: feature dùng lúc inference chính là feature dùng để train model kế tiếp. T…
- Data Inlining in DuckLake: Unlocking Streaming for Data Lakes Bài tóm tắt · DuckDB Labs · 2026
…nguyên. Thay đổi chính - DuckLake dùng một database làm catalog (SQLite, Postgres...). Thay đổi nhỏ hơn ngưỡng (mặc định 10 dòng, chỉnh được theo global/schema/bảng) được ghi thẳng…