Tìm kiếm
7 kết quả cho “Trino”. Tìm không phân biệt dấu.
- Scaling Grab's Data Lake: Our journey to Apache Iceberg adoption Bài tóm tắt · Grab · 2026
…theo Grab: - Bảng điều hướng truy cập nhiều: Z-ordering cho Trino bỏ qua file không liên quan, truy vấn từ 70 xuống 6 giây. - Bảng vận hành truy vấn nhiều: chi phí API S3 mỗi ngày…
- Navigating the Spark 3 and EMR 6 Upgrade Journey at Slack Bài tóm tắt · Slack · 2024
…t với đúng dữ liệu production, so bằng EXCEPT và COUNT trên Trino, lệch thì phân tích bằng framework Python nội bộ. Nguồn lệch giả: cột timestamp hiện tại (loại khỏi so sánh), ORDE…
- Apache Spark Resource Optimization: Lessons From Eight Million Jobs a Day Bài tóm tắt · Salesforce · 2026
Data 360 của Salesforce chạy khoảng 8 triệu lần Spark mỗi ngày (2026), từ job ngắn tới job xử lý TB trong nhiều giờ. Hoá đơn compute tăng trong khi job vẫn thành công. Theo bài: thành công chỉ chứng minh cấu hình chạy…
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- Building Scalable Real Time Event Processing with Kafka and Flink Bài tóm tắt · DoorDash · 2022
…backfill được khi Kafka hết hạn giữ, mở đường cho lake với Trino) → Snowpipe nạp vào Snowflake khi có thông báo SQS. Mỗi event một job Flink và một Snowpipe để scale và cô lập lỗi…
- DuckLake v1.0: The Lakehouse Format Built on SQL Reaches Production-Readiness Bài tóm tắt · DuckDB Labs · 2026
…của DuckDB theo lượt tải; có client cho DataFusion, Spark, Trino, Pandas; MotherDuck có dịch vụ host; "hàng chục công ty" dùng ở production. - Hướng tới: v1.1 inline cả variant ch…
- From SSH to REST: A Security-Driven Modernization of Slack’s EMR Data Pipelines Bài tóm tắt · Slack · 2026
…- Quarry , gateway nộp job sẵn có của Slack (cho EMR/YARN, Trino, Snowflake), đứng giữa: xác thực bằng token giữa service thay SSH key, theo dõi trạng thái phía server, huỷ, log/m…