0

Bẫy chi phí AWS #13: Gọi Secrets Manager trong handler Lambda tốn $150/tháng

Một dòng code lấy mật khẩu database, đặt sai chỗ, tốn $150 mỗi tháng. Và nó còn làm API chậm đi vài chục mili giây ở mỗi request.

Bẫy này mình gặp nhiều trong code review đến mức gần như mặc định sẽ tìm nó mỗi khi đọc một Lambda mới.

Giá trong bài là giá tham khảo region us-east-1.

Bối cảnh

Một Lambda xử lý API, chạy khoảng 30 triệu lần/tháng. Lần nào chạy, nó cũng gọi Secrets Manager để lấy mật khẩu DB, rồi mới kết nối RDS.

Vì sao tốn tiền

  1. Code gọi get_secret_value() ngay bên trong hàm handler. Nghĩa là mỗi lần Lambda được invoke là một lần gọi API Secrets Manager, dù mật khẩu không hề thay đổi.
  2. Secrets Manager tính $0,05/10.000 lần gọi API. Lambda chạy 30 triệu lần thì có 30 triệu lần gọi.
  3. Chưa hết: mỗi lần gọi thêm vài chục ms độ trễ vào request của người dùng. Gọi quá nhiều còn có thể chạm giới hạn tốc độ và bị throttling, lúc đó API lỗi chứ không chỉ chậm.

Hóa đơn

  • 30 triệu ÷ 10.000 × $0,05 = $150/tháng, chỉ để đọc đi đọc lại cùng một mật khẩu.

Cách sửa

Lambda tái sử dụng execution environment (container) giữa các lần chạy, và mọi thứ khai báo ngoài handler sẽ sống qua nhiều lần invoke. Tận dụng điều đó:

  • Khai báo biến cache ở ngoài handler, chỉ gọi Secrets Manager khi cache trống hoặc đã hết hạn (TTL 5 phút):
_cache = {"value": None, "at": 0}

def get_db_password():
    if time.time() - _cache["at"] > 300:   # TTL 5 phút
        r = sm.get_secret_value(SecretId="prod/db")
        _cache.update(value=r["SecretString"],
                      at=time.time())
    return _cache["value"]
  • Hoặc dùng AWS Parameters and Secrets Lambda Extension, có sẵn cache, không cần tự viết.
  • Cùng họ với bẫy này: nếu dùng S3 với SSE-KMS, bật S3 Bucket Key để giảm số lần gọi KMS.

Sau khi sửa:

  • Mỗi container chỉ gọi lại sau TTL 5 phút
  • Cả tháng khoảng 100.000 lần gọi × $0,05/10.000 ≈ $0,50/tháng
  • Giảm khoảng 99,7%, và API nhanh hơn ở hầu hết request.

Lưu ý

Khi secret được rotate, cache có thể vẫn dùng mật khẩu cũ trong tối đa bằng TTL. Hãy cấu hình rotation theo kiểu giữ cả mật khẩu cũ và mới hợp lệ trong lúc chuyển giao (ví dụ chiến lược alternating users), và cho code thử lấy lại secret một lần khi gặp lỗi xác thực.

Checklist tự kiểm tra

  • Tìm trong code Lambda các lời gọi get_secret_value hoặc get_parameter nằm bên trong handler.
  • Mở CloudTrail hoặc Cost Explorer, xem số lần gọi Secrets Manager và KMS có tỷ lệ gần 1:1 với số lần invoke Lambda không.
  • Kiểm tra các bucket SSE-KMS đã bật Bucket Key chưa.

Lời kết

Đây là bài 13/25 của series "Bẫy chi phí AWS". Bản video ngắn có sơ đồ động nằm trên page Trà Đá Tech: https://www.facebook.com/profile.php?id=61596642752252

Team bạn đang cache secret theo cách nào, tự viết hay dùng extension? Hãy chia sẻ trong phần bình luận.

Nếu thấy bài viết hữu ích, hãy upvote và follow để theo dõi các bài tiếp theo.

Bài tiếp theo: Hàng trăm triệu file nhỏ trên S3, $500 tiền PUT so với $23 tiền lưu trữ


All Rights Reserved

Viblo
Let's register a Viblo Account to get more interesting posts.