Tìm kiếm
40 kết quả cho “Lambda”. Tìm không phân biệt dấu.
- Questioning the Lambda Architecture Bài tóm tắt · LinkedIn · 2014
…h — [bài gốc](https://www.oreilly.com/radar/questioning-the-lambda-architecture/) Bài quan điểm của Jay Kreps (lúc đó dẫn hạ tầng dữ liệu real-time ở LinkedIn, đồng tác giả Kafka),…
- Utilizing Amazon DynamoDB and AWS Lambda for Asynchronous Event Publication Bài tóm tắt · Zalando · 2022
…ing.zalando.com/posts/2022/02/transactional-outbox-with-aws-lambda-and-dynamodb.html) Bối cảnh - Order Store của Zalando Payments lưu dữ liệu thanh toán theo đơn hàng trong DynamoD…
- ML Model Deployment for Zillow Floor Plans with SageMaker Bài tóm tắt · Zillow · 2020
…atch Alarm kích hoạt Step Functions : tiền xử lý, rồi nhiều Lambda song song, mỗi Lambda cho một model, theo mẫu start → monitor → wait → monitor → end để không trả tiền Lambda tro…
- Preventing Rogue Cookies with the Zillow Cookie Checker Bài tóm tắt · Zillow · 2019
…i chính - Cookie Checker (thực tập sinh làm, 2019): một AWS Lambda chạy vài phút một lần, mỗi lần quét một trang. - Trạng thái nằm ngoài Lambda trong DynamoDB : danh sách URL cần q…
- Open Sourcing Coinbase's Secure Deployment Pipeline (Odin) Bài tóm tắt · Coinbase · 2018
…r cho mọi tài khoản AWS. - Chỉ dùng dịch vụ AWS có sẵn: một Lambda + một Step Function assume role vào tài khoản đích. Điều kiện duy nhất để deploy vào một tài khoản là có IAM role…
- Finding Order in Chaos: How We Automated Performance Testing with Torque Bài tóm tắt · Dream11 · 2021
…s (Redisson) → generator thắng lấy dữ liệu, đẩy lên S3, gọi Lambda (hoặc Spark nếu 100–200 triệu dòng, vượt giới hạn Lambda) chia file theo số generator và ghi đường dẫn vào Redis…
- Building Venice with Apache Helix Bài tóm tắt · LinkedIn · 2017
…Only, phục vụ cả batch lẫn stream trong một hệ: hỗ trợ kiểu lambda, chỉ batch, hoặc chỉ stream (kappa). - Đường ghi đi qua Kafka: dữ liệu từ Hadoop hoặc Samza được đẩy vào Kafka; s…
- How we build a robust analytics platform using Spark, Kafka and Cassandra Bài tóm tắt · Walmart · 2018
…a-robust-analytics-platform-using-spark-kafka-and-cassandra-lambda-architecture-70c2d1bc8981) Bài ngắn (3 phút đọc), mô tả kiến trúc ở mức khối. Site chặn crawler; ghi chú viết từ…
- Serverless Transactions Serve Customers Bài tóm tắt · CapitalOne · 2017
…ức chấp nhận eventual consistency. - Thành phần serverless: Lambda bắt file giao dịch từ mainframe, theo dõi trạng thái file, đọc và nạp vào DynamoDB, chỉnh WCU/RCU động ; một hạ t…
- Introducing OxCaml Bài tóm tắt · Jane Street · 2025
…hông riêng cho systems programming. - Dựng trên middle-end Flambda2 . - Mọi chương trình OCaml hợp lệ đều là chương trình OxCaml hợp lệ. Phần mở rộng thì không hứa ổn định hay tươn…
- From Events to Insights: Memgraph Production Telemetry Stack with AWS, ClickHouse, and Grafana Bài tóm tắt · Memgraph · 2026
…Elastic IP → EC2 chạy NGINX làm lớp nạp đơn giản → API trên Lambda (chịu đỉnh khi có release mà không cấp sẵn năng lực) → kiểm tra nhẹ rồi ghi nguyên request JSON lên S3 . S3 là ng…
- Diving into Uber's cutting-edge data infrastructure Bài tóm tắt · Onehouse · 2024
…o chủ nhà hàng); batch (xu hướng một năm). Thay đổi chính - Lambda architecture: một luồng dữ liệu vào phục vụ cả hai nhánh. Nhánh realtime: Kafka → Flink → Pinot , trên đó một lớp…
- Keeping Counts In Sync Bài tóm tắt · SoundCloud · 2018
…ước về hệ đếm realtime Stitch . Kiến trúc hiện tại (2018) - Lambda Architecture dạng tăng dần : không tính lại tầng serving từ đầu, chỉ tính lại các bucket giờ/ngày/tháng thay đổi…
- Stream processing Chủ đề Thành viên
Khi batch hằng ngày hay hằng giờ không còn đủ tươi (chi tiêu quảng cáo phải dừng đúng lúc chạm ngân sách, dashboard MRR không được trễ 24 giờ, alert phải bắn khi contest sắp đầy), hệ phải tính liên tục trên luồng sự…
- Pipeline dữ liệu và analytics Chủ đề Thành viên
Lúc đầu, báo cáo chạy thẳng trên DB production. Đến một lúc truy vấn phân tích làm chậm giao dịch, dữ liệu cần gộp từ nhiều nguồn, và có thêm người dùng mới (analyst, ML, khách hàng xem dashboard). Khi đó cần một mặt…
- Bảo mật hạ tầng và quản lý secret Chủ đề Thành viên
Khi hệ thống lớn lên, số credential (mật khẩu DB, API key, SSH key, token, cookie phiên) tăng theo số service, pipeline, nhà cung cấp, và chúng rải vào code, cấu hình, hệ build, log. Các nguồn trong wiki cho thấy kẻ tấn…
- Event-driven, message queue và Kafka Chủ đề Thành viên
Khi một hệ có nhiều bên cần biết "có gì vừa xảy ra" (đơn hàng đổi trạng thái, tin đăng được sửa, ticket được cập nhật), gọi đồng bộ từng bên một làm producer phải biết mọi consumer, và một consumer chậm kéo chậm cả…
- Giao dịch phân tán và nhất quán xuyên service Chủ đề Thành viên
Với một DB quan hệ, BEGIN … COMMIT lo hết. Khi dữ liệu bị chia (shard, tách service, thêm Redis bên cạnh Postgres), một thao tác nghiệp vụ chạm nhiều nơi, và câu hỏi khó nhất trở thành "timeout rồi, việc đó đã xảy ra…
- Chi phí hạ tầng và build vs buy Chủ đề Thành viên
Khi còn nhỏ, chi phí hạ tầng là chuyện phụ và cloud là lựa chọn hiển nhiên. Khi lớn lên, hoá đơn có thể chiếm phần lớn giá vốn. Hai câu hỏi xuất hiện: tối ưu chi phí trên nền đang có thế nào, và khi nào nên tự xây (hoặc…
- Chọn database theo workload Chủ đề Thành viên
Không có database tốt nhất, chỉ có database hợp với mẫu đọc/ghi ở một quy mô cụ thể. Mẫu đó thay đổi khi sản phẩm lớn lên. Ngoài ra, chuyên môn vận hành của đội cũng là một phần của "workload".
- Load test và kiểm chứng capacity Chủ đề Thành viên
Trước một mốc tải chưa từng gặp (ra mắt game, tính năng mới gửi push toàn quốc, mùa giải, tăng trưởng nhanh), cần biết hệ chịu được bao nhiêu, cái gì gãy trước, và cần bao nhiêu máy. Test từng service riêng không đủ vì…
- Nền tảng ML (feature, training, serving, giám sát model) Chủ đề Thành viên
Model ML đầu tiên của một công ty thường được nhúng thẳng vào một service có sẵn, với feature tính trong vài script và train bằng một job riêng. Khi số model và số người làm model tăng, bốn chỗ cùng hỏng:
- Building Multi-Region Resiliency with Amazon RDS and Amazon Aurora Bài tóm tắt · Goldman Sachs · 2021
…ager Automation (kích hoạt theo quy trình maker/checker); - Lambda (đệ quy, kiểm tra trạng thái sau mỗi API call để vượt giới hạn 15 phút); - Parameter Store giữ cấu hình để dựng D…
- LinkedIn Công ty Thành viên
Bài khung là bài nhìn lại năm 2015 . LinkedIn bắt đầu năm 2003 là một monolith tên Leo. Service đầu tiên tách ra là member graph, vì đồ thị kết nối có profile tải khác hẳn; DB profile được đỡ bằng scale dọc rồi replica…
- The Log: What every software engineer should know about real-time data's unifying abstraction Bài tóm tắt · LinkedIn · 2013
Khoảng 2007 LinkedIn bắt đầu chạm giới hạn của một database tập trung, chuyển sang một danh mục hệ phân tán chuyên biệt: search, social graph, Voldemort (key-value), Espresso (document), recommendation, OLAP, Hadoop,…
- Onehouse Công ty Thành viên
Nguồn duy nhất của Onehouse trong wiki là bản tóm tắt (2024) talk năm 2023 của Uber về hạ tầng dữ liệu, nên mọi nhận định là theo Uber qua lời kể của Onehouse: kiến trúc Lambda phục vụ bốn loại nhu cầu từ streaming dưới…
- Shipyard: How We Built Slack's Next-Generation EC2 Platform Bài tóm tắt · Slack · 2026
…dọn AMI cũ, publish ID mới vào SSM Parameter, EventBridge + Lambda kích pipeline của các team phía sau, test trên instance tạm trước khi publish). Mỗi team build AMI service trên s…
- AWS Multi-Account Architecture with Terraform, Yeoman, and Jenkins Bài tóm tắt · Slalom Build · 2018
…AM user), tài nguyên (không được sửa trail CloudTrail, VPC, Lambda giám sát của admin) và điều kiện. SCP bật/tắt dịch vụ theo nhánh của cây tổ chức (sandbox mở rộng, production chỉ…
- SoundCloud Công ty Thành viên
Năm 2013 SoundCloud rời mô hình một Public API cho mọi client, tách monolith thành microservice và khai sinh pattern BFF; đến 2021 có vài chục BFF dùng chung thư viện edge, nhưng logic tích hợp và phân quyền bị nhân bản…
- Walmart Công ty Thành viên
Nhiều team ở Walmart dùng Cassandra làm nguồn chính (hàng chục tới hàng trăm nghìn ops/giây). Năm bài học (2017): shard key nhân tạo chống partition lệch, tách Solr khỏi Cassandra, không đọc/ghi cả hàng, cẩn thận với…
- Zalando Công ty Thành viên
Năm 2016 Zalando dựng microservices CRUD phát event mà không có read API: mỗi team tự replay stream và dựng bản sao, sinh nhiều nguồn sự thật; event Offer trễ tới 30 phút dịp Cyber Week. Từ 2022 họ gom về Product Read…
- Zillow Công ty Thành viên
Zillow cho thấy một công ty dữ liệu đi từ ứng dụng web có cache tự làm sang nền tảng dữ liệu, ML và thí nghiệm dùng chung. Năm 2012 các sản phẩm mới đã chạy trên AWS: nền tảng website cho môi giới trên WordPress dùng…
- Avoiding Double Payments in a Distributed Payments System Bài tóm tắt · Airbnb · 2019
…ôn đọc/ghi trên master đã shard , gộp transaction bằng Java lambda, phân loại lỗi retryable/non-retryable. - Mỗi request chia ba pha : Pre-RPC (ghi chi tiết request vào DB), RPC (g…
- CapitalOne Công ty Thành viên
Bài khái niệm (2020) của CapitalOne về active-active shared-nothing ở tầng DB: khác với HA, đòi ứng dụng chịu được xung đột ghi và hỏng dữ liệu âm thầm, nên hợp với cache hay session state hơn là system of record . Một…
- How we rebuilt Next.js with AI in one week Bài tóm tắt · Cloudflare · 2026
…ốn chạy trên nền tảng serverless khác (Cloudflare, Netlify, Lambda) phải nắn lại output build. OpenNext làm việc đó bằng cách dịch ngược output của Next.js, nên vỡ không đoán trước…
- Coinbase Công ty Thành viên
Năm 2026, mất một AZ của AWS us-east-1 (hỏng hệ làm lạnh) biến thành khoảng 8 giờ gián đoạn: matching engine Raft dồn trong một placement group mất quorum mà không có failover tự động, còn Kafka managed (MSK) không bầu…
- Goldman Sachs Công ty Thành viên
Mảng Transaction Banking phải chứng minh với cơ quan quản lý rằng hệ thống chạy tiếp khi mất region. Với RDS Oracle và Aurora PostgreSQL, họ chọn ứng dụng active/passive, replication bất đồng bộ và tự xây công cụ…
- Chaos Testing an Application on AWS Bài tóm tắt · Goldman Sachs · 2022
…ản AWS, nhiều VPC; Fargate, Aurora Postgres, Elasticsearch, Lambda, NLB, dependency ngoài qua VPC endpoint; SLO 99,99% khả dụng, p95 50 ms. - Chaos trong CI/CD: ChaosToolkit (thêm…
- Memgraph Công ty Thành viên
Memgraph là công ty graph database. Năm 2026 họ bỏ colocation tự giữ máy cho CI và benchmark sang thuê Hetzner, chi phí giảm khoảng một nửa; CI chạy trên vCPU dùng chung, benchmark trên bare metal để giảm nhiễu . Cùng…
- Prometheus High Availability and Fault Tolerance Strategy, Long Term Storage with VictoriaMetrics Bài tóm tắt · Miro · 2020
…u DNS active/passive (một điểm nhận duy nhất cho batch job, lambda); Blackbox nhân đôi; exporter trên node không cần nhân. - Lưu dài hạn bằng VictoriaMetrics bản cluster : vminsert…