Tìm kiếm
20 kết quả cho “Google Analytics”. Tìm không phân biệt dấu.
- How Zillow Tests Clickstream Analytics Bài tóm tắt · Zillow · 2020
…nt analytics (page view, sự kiện) do dev gắn vào trang, gửi Google Analytics, rồi được kéo từ BigTable về data lake (bảng Hive). Zillow chưa có schema chung cho event. - Dev đổi tê…
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- Scaling data access by moving an exabyte of data to Google Cloud Bài tóm tắt · Twitter · 2022
…re/2022/scaling-data-access-by-moving-an-exabyte-of-data-to-google-cloud) Bối cảnh - 2019: Twitter muốn "dân chủ hoá" việc phân tích dữ liệu cho nhân viên và tăng tốc ML. Họ hợp tá…
- Image Migration to Google Cloud Platform Bài tóm tắt · trivago · 2024
trivago nhận ảnh khách sạn từ OTA, chuỗi khách sạn, nhà cung cấp nội dung; nhiều pipeline lọc, gắn nhãn (ML), chọn ảnh chính và gallery.
- Diving into Uber's cutting-edge data infrastructure Bài tóm tắt · Onehouse · 2024
…rơi đúng chỗ đã cache. - Hybrid cloud: đang đưa dữ liệu lên Google Cloud (Hive Sync từ HDFS sang GCS); router Presto hỏi Hive Metastore xem bảng nằm on-prem hay cloud để đặt truy v…
- Twitter Sparrow tackles data storage challenges of scale Bài tóm tắt · Twitter · 2022
…ator gom event từ service đẩy vào message queue (Kafka hoặc Google Pub/Sub); Streaming Event Processor chạy Apache Beam trên Google Dataflow đọc queue, biến đổi/đổi định dạng rồi g…
- Running Cost-Efficient Export Workloads at Uber Bài tóm tắt · Uber · 2026
…nhỏ, nhưng vẫn quét cả bảng . - Lakehouse của Uber nằm trên Google Cloud Storage với Autoclass: dữ liệu ít đụng tới tự xuống lớp rẻ hơn. Analytics thường quét nhiều nhưng ở partiti…
- Preventing Rogue Cookies with the Zillow Cookie Checker Bài tóm tắt · Zillow · 2019
…g trang nào được tạo các cookie đó. Cookie đến từ tag trong Google Tag Manager và từ code của Zillow. - Nhiều team, nhiều trang: rất dễ có cookie mới lọt vào mà không tôn trọng tuỳ…
- Hot partition và thundering herd Chủ đề Thành viên
Chia dữ liệu và tải ra nhiều máy chỉ hiệu quả khi tải chia đều. Thực tế tải lệch: một khách hàng khổng lồ, một kênh có @everyone, một bài của người nổi tiếng. Có hai dạng hay gặp:
- Failover, replica và dự phòng dữ liệu Chủ đề Thành viên
Mọi hệ có trạng thái đều giữ nhiều bản (replica) để một máy chết không làm mất dịch vụ. Khó không nằm ở việc có bản sao mà ở lúc chuyển sang bản sao:
- Chọn database theo workload Chủ đề Thành viên
Không có database tốt nhất, chỉ có database hợp với mẫu đọc/ghi ở một quy mô cụ thể. Mẫu đó thay đổi khi sản phẩm lớn lên. Ngoài ra, chuyên môn vận hành của đội cũng là một phần của "workload".
- Migration không downtime Chủ đề Thành viên
Hệ thống đang chạy thật (gọi xe, chat, thiết kế) không được dừng, nhưng phải đổi ngôn ngữ, database hoặc hạ tầng bên dưới.
- Quản lý fleet và migrate code hàng loạt Chủ đề Thành viên
Khi số component (repo, service, pipeline, thư viện) tăng nhanh hơn số kỹ sư, chi phí của mỗi thay đổi xuyên suốt (nâng thư viện, vá bảo mật, đổi API nội bộ, khai tử dataset) tỉ lệ với số component chứ không với độ khó…
- How we built our Internal Data Warehouse at ClickHouse: A year later Bài tóm tắt · ClickHouse · 2024
…nhận khoảng 4 tỉ dòng/ngày , gần nghìn tỉ dòng tổng; event Google Analytics dạng mảng lồng; bản đổ từ DB NoSQL của control plane dạng JSON. Đưa ra cả dạng thô (user tự trích trườn…
- Amundsen — Lyft's data discovery & metadata engine Bài tóm tắt · Lyft · 2019
…ý, và cả con người (team, dữ liệu hay dùng). - Amundsen là "Google cho dữ liệu": ô tìm kiếm bằng tiếng thường, khớp mờ trên tên bảng, tên cột, mô tả; xếp hạng kiểu PageRank theo số…
- How we built the Internal Data Warehouse at ClickHouse Bài tóm tắt · ClickHouse · 2023
…rồi PR Preprod → Prod. - Phân quyền ở tầng DB, không ở BI: Google Groups ánh xạ sang role trong ClickHouse qua một bảng quyền (DB, bảng, cột, filter dòng); script dựng lại user/ro…
- Centrifuge: a reliable system for delivering billions of events per day Bài tóm tắt · Segment · 2018
…àng trăm nghìn event mỗi giây và chuyển tới hàng trăm đích (Google Analytics, Salesforce, webhook của khách). Bất kỳ lúc nào cũng có vài chục đích đang hỏng: latency tăng 10 lần, 5…
- Goodbye Microservices: From 100s of problem children to 1 superstar Bài tóm tắt · Segment · 2018
…hìn event/giây và chuyển tiếp tới hơn 100 loại destination (Google Analytics, webhook…). - Bước 1, một hàng đợi chung: event mới và event retry nằm chung. Một destination chậm thì…
- How We Built Infrastructure to Run User Forecasts at Spotify Bài tóm tắt · Spotify · 2022
…tắt và biểu đồ cho cả công ty. - Công cụ: Dataflow (Beam do Google quản lý) cho việc cần song song lớn; job Python đóng Docker chạy trên Kubernetes cho việc nhỏ. Vì sao - Kiểm soát…
- Apache Hudi at Uber: Engineering for Trillion-Record-Scale Data Lake Operations Bài tóm tắt · Uber · 2026
…òng và 3 triệu file mới mỗi ngày; 350 PB logic trên HDFS và Google Cloud Storage; 10 PB ingest mỗi ngày; 350.000 commit/ngày; 70.000 lượt table service (compaction, clean, clusteri…