Tìm kiếm

4 kết quả cho “DAG schedule delay”. Tìm không phân biệt dấu.

• How We Monitor Apache Airflow in Production
  Bài tóm tắt · Gojek · 2020

  …ver, worker, executor, họ có thêm tiến trình riêng: đồng bộ DAG từ GCS/git, đồng bộ biến Airflow tuỳ biến. Theo họ, càng nhiều thành phần thì càng dễ hỏng. Thay đổi chính - Đường m…

• Pipeline dữ liệu và analytics
  Chủ đề Thành viên

  Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…

• Hot partition và thundering herd
  Chủ đề Thành viên

  Chia dữ liệu và tải ra nhiều máy chỉ hiệu quả khi tải chia đều. Thực tế tải lệch: một khách hàng khổng lồ, một kênh có @everyone, một bài của người nổi tiếng. Có hai dạng hay gặp:

• Observability và monitoring
  Chủ đề Thành viên

  Lúc đầu, monitoring là vài dashboard và một công cụ cài sẵn; log đọc thẳng từ máy. Khi hệ lớn lên, chính hệ quan sát thành một hệ phân tán có bài toán riêng: