Tìm kiếm
8 kết quả cho “Pig”. Tìm không phân biệt dấu.
- Using Presto in our Big Data Platform on AWS Bài tóm tắt · Netflix · 2014
…ụm (chạy dài hay tạm) cùng đọc chung dữ liệu. User viết job Pig hoặc Hive cho ETL và phân tích; một phần nhỏ kết quả và dữ liệu tổng hợp chuyển sang Teradata cho truy vấn tương tác…
- Netflix Billing Migration to AWS — Part II Bài tóm tắt · Netflix · 2016
…n đổi sang Aegisthus đọc SSTable Cassandra ra JSON trên S3, Pig chạy MapReduce mỗi ngày; Sqoop đẩy cả Oracle và Cassandra vào Hive để join khi điều tra. - Migrate từng nước: tắt cá…
- Enhancing Bandaid load balancing with real-time backend server load information Bài tóm tắt · Dropbox · 2019
Request của user qua GSLB (DNS) tới hơn 20 PoP, qua L4 rồi edge proxy L7, vào data center thì Bandaid định tuyến tới service. Bandaid đang dùng random N choices (N = 2) theo số request đang mở mà chính instance đó thấy,…
- Chọn database theo workload Chủ đề Thành viên
Không có database tốt nhất, chỉ có database hợp với mẫu đọc/ghi ở một quy mô cụ thể. Mẫu đó thay đổi khi sản phẩm lớn lên. Ngoài ra, chuyên môn vận hành của đội cũng là một phần của "workload".
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- Netflix Công ty Thành viên
Sự cố hỏng DB năm 2008 dẫn tới 7 năm lên AWS theo hướng cloud-native . Bài kiểm tra lớn đầu tiên là sự cố AWS US-East năm 2011: kiến trúc stateless, nhiều zone, fallback chịu được, nhưng rút khỏi zone phải làm tay. Từ…
- Advancing Our Chef Infrastructure Bài tóm tắt · Slack · 2024
…nhiều công cụ nội bộ. - Upload cookbook: chạy nhiều bản DishPig (mỗi stack một), fan-out qua SNS → nhiều SQS; message tới lệch giờ làm các stack có phiên bản cookbook khác nhau. -…
- How we built the Tinder API Gateway Bài tóm tắt · Tinder · 2022
…n không thống nhất giữa các API. - Đã xét AWS API Gateway, Apigee, Tyk, Kong, Express Gateway, KrakenD. Theo Tinder: một số không hợp với mesh Envoy, một số nặng cấu hình và plugin…