S3 미완료 멀티파트 업로드(MPU) - 비용절감 프로젝트 #3
·
AWS/S3
이 글은 AWS 인프라 운영 중 경험한 실제 비용절감 사례를 기록한 시리즈입니다.1. 개요이번에는 Amazon S3에서 발생할 수 있는 숨은 비용 중 하나인 "미완료 멀티파트 업로드(Uncompleted Multipart Upload, MPU)" 문제와 그 해결 사례를 정리합니다. 회사 내부에서는 비용항목을 모니터링 중 S3의 비용이 높아지면서 실제로 약 1.1TB의 불필요한 스토리지 비용이 발생하고 있었습니다.2. 멀티파트 업로드란?Amazon S3는 대용량 객체(최대 5TB)를 효율적으로 업로드하기 위해 Multipart Upload 기능을 제공합니다.장점:네트워크 장애 시 복구 용이병렬 처리로 업로드 속도 향상객체 크기에 따라 자동 최적화일반 객체 업로드는 최대 5GB 제한, Multipart Up..