Tìm kiếm
33 kết quả cho “GC model”. Tìm không phân biệt dấu.
- Building a lower-latency GC Bài tóm tắt · Jane Street · 2015
…i gốc](https://blog.janestreet.com/building-a-lower-latency-gc/) Bối cảnh - GC gây pause không đoán trước, xấu cho hệ giao dịch. Cách thường làm là pool hết object , không cấp phát…
- Flex Model: an event-driven feature engineering system Bài tóm tắt · Jane Street · 2026
Nhiều chiến lược giao dịch của Jane Street dùng mạng nơ-ron, nhưng dữ liệu thị trường thô (lệnh được thêm vào sổ lệnh, lệnh huỷ, giao dịch khớp) phải biến thành feature trước. Ví dụ đơn giản: mid (giữa giá mua tốt nhất…
- Memory allocator showdown Bài tóm tắt · Jane Street · 2020
…chậm hơn chút nhưng dùng ít bộ nhớ hơn. - Trong ngôn ngữ có GC, GC chọn lúc giải phóng, nên hiệu năng không phải một điểm (bộ nhớ, thời gian) mà là một đường cong . Họ quét tham số…
- The LMAX Architecture Bài tóm tắt · LMAX · 2011
…he) lên khoảng 100K; collection tự viết thân thiện cache và GC (ví dụ map khoá long trên mảng) và test hiệu năng viết trước mới lên thêm một bậc. - Mô hình lập trình: không gọi dịc…
- Halving the Time: How Uber Eats Rebuilt Its Search Pipeline Bài tóm tắt · Uber · 2026
…rong Go, đối tượng tham chiếu bằng con trỏ cấp trên heap và GC chiếm hơn 40% CPU ở vài service, đổi định nghĩa mô hình dữ liệu sang value type để cấp trên stack. - Vòng lặp agent:…
- The Journey of User-Generated Content Translation Bài tóm tắt · Mercari · 2025
…giá, chi phí ÷7, metric đi ngang. - Gemini 1.5 Flash trên GCP: nền tảng chính của Mercari (Azure đòi IaC, xác thực riêng); rate limit pay-as-you-go cao nên bỏ được capacity đặt trư…
- Using OxCaml to implement type-safe reference counting between OCaml and Python Bài tóm tắt · Jane Street · 2026
…te trên heap toàn cục): bọc thì tăng refcount, chỉ giảm khi GC của OCaml chạy finalizer. - Hệ quả: việc giải phóng một data frame nhiều GB (hay bộ nhớ GPU) bị buộc vào lúc GC của O…
- Lessons Learned From Running Apache Airflow at Scale Bài tóm tắt · Shopify · 2022
…uler liên tục quét và parse lại mọi file DAG. Ban đầu mount GCS qua GCSFuse ở mỗi pod , mỗi lần đọc file là một request GCS: nghẽn. Chuyển sang một NFS server trong cluster (read-w…
- Enhancing Cloud Usage Forecasting, Monitoring & Optimizing Bài tóm tắt · Etsy · 2024
…oàn tất chuyển từ data center tự vận hành lên Google Cloud (GCP) . Nhóm program manager lo cuộc migration sau đó trở thành team FinOps . - Team FinOps đặt dưới Chief Architect, khô…
- How Discord Stores Billions of Messages Bài tóm tắt · Discord · 2017
…n dưới 100MB (khi import đã thấy partition 100MB gây áp lực GC). - Dark launch: đọc/ghi kép vào MongoDB và Cassandra, rồi bỏ MongoDB trong vòng một tuần. - Cụm ban đầu: 12 node, re…
- Deploy và release an toàn Chủ đề Thành viên
Phần lớn sự cố bắt đầu bằng một thay đổi: code mới, cấu hình mới, hạ tầng mới. Khi hệ thống và tổ chức lớn lên, câu hỏi là làm sao đưa thay đổi lên production thường xuyên mà vẫn giới hạn được thiệt hại khi có lỗi.
- Hệ thống độ trễ thấp (low latency) Chủ đề Thành viên
Ở sàn giao dịch và công ty market making, mỗi giao dịch làm thay đổi thị trường cho giao dịch sau, và ai phản ứng chậm hơn thì thua. Yêu cầu không chỉ là latency trung bình thấp mà latency ổn định ở đuôi, ở thang micro…
- Hạ tầng phục vụ LLM inference Chủ đề Thành viên
Phục vụ LLM giống một dịch vụ web ở chỗ cần scale theo tải, deploy phiên bản mới an toàn và phục hồi khi một process chết; nhưng ba đặc điểm làm các công cụ quen thuộc hỏng:
- Hạ tầng nghiên cứu định lượng (dữ liệu thị trường, feature, backtest) Chủ đề Thành viên
Một quỹ định lượng hay công ty market making sống bằng vòng nghiên cứu: đặt giả thuyết → lấy dữ liệu → tạo feature → train model hay dựng tín hiệu → backtest/mô phỏng → đưa vào giao dịch thật → lặp lại. Theo Optiver, độ…
- Chi phí hạ tầng và build vs buy Chủ đề Thành viên
Khi còn nhỏ, chi phí hạ tầng là chuyện phụ và cloud là lựa chọn hiển nhiên. Khi lớn lên, hoá đơn có thể chiếm phần lớn giá vốn. Hai câu hỏi xuất hiện: tối ưu chi phí trên nền đang có thế nào, và khi nào nên tự xây (hoặc…
- Observability và monitoring Chủ đề Thành viên
Lúc đầu, monitoring là vài dashboard và một công cụ cài sẵn; log đọc thẳng từ máy. Khi hệ lớn lên, chính hệ quan sát thành một hệ phân tán có bài toán riêng:
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- Coding agent trong engineering (migrate, viết lại, chạy song song, quyền hạn) Chủ đề Thành viên
Từ 2026 các công ty bắt đầu giao cho coding agent những việc trước đây là dự án nhiều tuần: migrate hàng trăm module hay dataset, dọn feature flag, viết lại cả framework hay app. Agent viết nhanh, nhưng ba thứ không tự…
- Nền tảng nội bộ cho service (đường ray chung) Chủ đề Thành viên
Tách hệ thống thành nhiều phần (service, hoặc component trong một monolith) giải được bài toán tổ chức. Nhưng nếu mỗi team tự làm RPC, retry, log, metric, contract theo cách riêng, thì ta chỉ đổi một kiểu hỗn loạn lấy…
- Xác thực và phân quyền (authn/authz) Chủ đề Thành viên
Ở monolith, mỗi dữ liệu thường chỉ có một đường vào, nên kiểm tra quyền nằm ngay đó: một hàm hasaccess?, một API mỗi resource. Khi hệ thống tách thành nhiều service, nhiều client, nhiều loại token, cả hai nửa đều vỡ:
- Kiến trúc frontend Chủ đề Thành viên
Frontend bắt đầu là vài trang render ở server; lớn lên thành ứng dụng có trạng thái, nhiều team cùng sửa, và mỗi tính năng thêm vào là thêm byte phải tải. Ba trục lặp lại trong các nguồn: render ở đâu (server, client,…
- Load test và kiểm chứng capacity Chủ đề Thành viên
Trước một mốc tải chưa từng gặp (ra mắt game, tính năng mới gửi push toàn quốc, mùa giải, tăng trưởng nhanh), cần biết hệ chịu được bao nhiêu, cái gì gãy trước, và cần bao nhiêu máy. Test từng service riêng không đủ vì…
- Jane Street Công ty Thành viên
Công ty giao dịch định lượng và market making, viết gần như mọi thứ bằng OCaml. Blog không kể chiến lược, nhưng kể khá nhiều về hạ tầng quanh chúng. Ở tầng công cụ, từ 2012 họ tự viết build system Jenga; năm 2014…
- Zillow Công ty Thành viên
Zillow cho thấy một công ty dữ liệu đi từ ứng dụng web có cache tự làm sang nền tảng dữ liệu, ML và thí nghiệm dùng chung. Năm 2012 các sản phẩm mới đã chạy trên AWS: nền tảng website cho môi giới trên WordPress dùng…
- LinkedIn Công ty Thành viên
Bài khung là bài nhìn lại năm 2015 . LinkedIn bắt đầu năm 2003 là một monolith tên Leo. Service đầu tiên tách ra là member graph, vì đồ thị kết nối có profile tải khác hẳn; DB profile được đỡ bằng scale dọc rồi replica…
- Introducing OxCaml Bài tóm tắt · Jane Street · 2025
…ngôn ngữ gốc. Bối cảnh - Jane Street sửa OCaml từ lâu (xem GC 2015 ở ). Vài năm gần đây các phần mở rộng ngôn ngữ đủ lớn để thành một nhánh compiler riêng, vẫn mã nguồn mở, với mụ…
- Mercari Công ty Thành viên
PaymentService của Merpay (2019) giữ nhất quán thanh toán qua nhiều service bằng cách tự làm ở tầng ứng dụng: chia pha + state machine, idempotency key bắt buộc, bù trừ kiểu TCC, đối soát và fault injection . Ba năm…
- From Local to Global: Building Seamless B2C Product Integration at Mercari Bài tóm tắt · Mercari · 2025
…load. - Historical sync: batch từ file export BigQuery trên GCS cho listing cũ (hết hàng, ngừng bán) và để sửa dữ liệu lệch; cấu hình theo job: offset bắt đầu/kết thúc, kích thước…
- Diving into Uber's cutting-edge data infrastructure Bài tóm tắt · Onehouse · 2024
…: đang đưa dữ liệu lên Google Cloud (Hive Sync từ HDFS sang GCS); router Presto hỏi Hive Metastore xem bảng nằm on-prem hay cloud để đặt truy vấn; Presto đọc GCS qua một HDFS clien…
- Counter Service: How we rewrote it in Rust Bài tóm tắt · Grab · 2025
…y. Discord 2020 thì ngược lại, viết lại vì spike latency do GC (). - Hệ sinh thái nội bộ (thư viện config, secret) là chi phí ẩn khi rời ngôn ngữ chính của công ty. Liên quan - -…
- How Render Workflows powers our internal data pipeline Bài tóm tắt · Render · 2026
…log đổ theo dòng vào log của task; artefact của dbt ghi lên GCS; mỗi task xong ghi một event vào bảng workflow run events , dùng cho lịch sử và dự đoán giờ dữ liệu sẵn sàng . - Sau…
- Spotify Công ty Thành viên
Hai nguồn của Spotify trong wiki đều về nền tảng nội bộ Backstage. Năm 2021, khi team hạ tầng giữ cluster Kubernetes ở nhiều region và team tính năng chỉ deploy lên, Spotify viết plugin Kubernetes cho Backstage để người…
- Sparkplug — a non-optimizing JavaScript compiler Bài tóm tắt · V8 (Google) · 2021
…rboFan kịp chạy. Họ đã làm parser, streaming, object model, GC song song, cache code đã biên dịch. - Interpreter Ignition đã rất nhanh nhưng còn chi phí cố hữu: giải mã operand, di…