Tìm kiếm
6 kết quả cho “ETL lineage”. Tìm không phân biệt dấu.
- Taming the ML Firehose: Scaling Feature Consistency Bài tóm tắt · Uber · 2026
…ain ghép từ app log, bảng feature Hive, click log qua nhiều ETL phụ thuộc nhau; pipeline offline bắt đầu sinh định dạng khác ( jp JA so với jp-JA online); lineage ETL mong manh (th…
- Amundsen — Lyft's data discovery & metadata engine Bài tóm tắt · Lyft · 2019
…ai tạo, ai dùng, sở hữu, lineage), Change (schema tiến hoá, ETL tạo ra nó). Đối tượng được mô tả: bảng trong kho (Hive, Presto, MySQL, S3), dashboard, event/schema, stream (Kafka,…
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- How we built our Internal Data Warehouse at ClickHouse: A year later Bài tóm tắt · ClickHouse · 2024
…): một service chỉ đọc cho BI, một service đọc-ghi 24/7 cho ETL quan trọng, một service đọc-ghi khác cho ETL ít quan trọng (cập nhật mỗi ngày) có thể tắt khi rảnh để tiết kiệm. Vì…
- DataHub: Popular metadata architectures explained Bài tóm tắt · LinkedIn · 2020
…không có change log thì mọi hệ phía sau phải poll hoặc chờ ETL đêm. - Team nền tảng giữ cả model lẫn dịch vụ sẽ thành nút thắt; tách quyền định nghĩa model ra theo domain. Liên qu…
- Database Federation: Decentralized and ACL-Compliant Hive Databases Bài tóm tắt · Uber · 2026
…ng dữ liệu trên mọi partition; kiểm hỏng (do TTL, backfill, ETL thêm partition trong lúc chạy) thì chỉ chạy lại migrator cho dataset đó. Đạt thì mới đổi con trỏ của cả base locatio…