기본 콘텐츠로 건너뛰기

AWS 비용 폭탄 막는 백엔드 개발자의 5가지 실천법

AWS 비용 폭탄 막는 백엔드 개발자의 5가지 실천법

안녕하세요! 오늘은 AWS 비용을 효과적으로 절감하는 방법에 대해 알아보겠습니다. 특히 백엔드 개발자 관점에서 실천할 수 있는 5가지 핵심 전략을 소개합니다.

1. EC2 인스턴스 최적화

1.1 인스턴스 타입 선택

# AWS SDK를 사용한 인스턴스 권장사항 조회
import boto3

def get_instance_recommendations():
    ec2 = boto3.client('ec2')
    response = ec2.get_instance_recommendations(
        InstanceArns=['arn:aws:ec2:region:account-id:instance/instance-id']
    )
    return response['InstanceRecommendations']

1.2 Auto Scaling 설정

{
    "AutoScalingGroupName": "your-asg",
    "MinSize": 2,
    "MaxSize": 5,
    "DesiredCapacity": 2,
    "TargetTrackingConfigurations": [
        {
            "PredefinedMetricSpecification": {
                "PredefinedMetricType": "ASGAverageCPUUtilization"
            },
            "TargetValue": 70.0
        }
    ]
}

1.3 스팟 인스턴스 활용

# 스팟 인스턴스 요청
import boto3

def request_spot_instances():
    ec2 = boto3.client('ec2')
    response = ec2.request_spot_instances(
        SpotPrice='0.03',
        InstanceCount=1,
        Type='one-time',
        LaunchSpecification={
            'ImageId': 'ami-12345678',
            'InstanceType': 't3.micro',
            'KeyName': 'your-key-pair'
        }
    )
    return response['SpotInstanceRequests']

2. RDS 데이터베이스 최적화

2.1 인스턴스 크기 조정

# RDS 인스턴스 크기 조정
import boto3

def resize_rds_instance():
    rds = boto3.client('rds')
    response = rds.modify_db_instance(
        DBInstanceIdentifier='your-db',
        DBInstanceClass='db.t3.small',
        ApplyImmediately=True
    )
    return response['DBInstance']

2.2 읽기 전용 복제본 활용

# 읽기 전용 복제본 생성
def create_read_replica():
    rds = boto3.client('rds')
    response = rds.create_db_instance_read_replica(
        DBInstanceIdentifier='your-db-replica',
        SourceDBInstanceIdentifier='your-db',
        DBInstanceClass='db.t3.small'
    )
    return response['DBInstance']

2.3 쿼리 최적화

# Django ORM 쿼리 최적화 예시
from django.db.models import Prefetch

def optimized_query():
    # N+1 문제 해결
    orders = Order.objects.select_related('user').prefetch_related(
        Prefetch('items', queryset=OrderItem.objects.select_related('product'))
    )

    # 필요한 필드만 선택
    users = User.objects.only('id', 'email', 'username')

    return orders, users

3. S3 스토리지 최적화

3.1 수명 주기 관리

{
    "Rules": [
        {
            "ID": "Move to IA",
            "Status": "Enabled",
            "Transitions": [
                {
                    "Days": 30,
                    "StorageClass": "STANDARD_IA"
                }
            ]
        },
        {
            "ID": "Delete old versions",
            "Status": "Enabled",
            "NoncurrentVersionExpiration": {
                "NoncurrentDays": 90
            }
        }
    ]
}

3.2 압축 및 캐싱

# Django에서 S3 파일 압축
from django.core.files.storage import default_storage
import gzip

def compress_and_upload(file_path):
    with open(file_path, 'rb') as f_in:
        with gzip.open(f'{file_path}.gz', 'wb') as f_out:
            f_out.writelines(f_in)

    with open(f'{file_path}.gz', 'rb') as f:
        default_storage.save(f'{file_path}.gz', f)

4. Lambda 함수 최적화

4.1 메모리 설정 최적화

# Lambda 함수 메모리 사용량 모니터링
import boto3
import json

def monitor_lambda_memory():
    cloudwatch = boto3.client('cloudwatch')
    response = cloudwatch.get_metric_statistics(
        Namespace='AWS/Lambda',
        MetricName='MemoryUtilization',
        Dimensions=[
            {
                'Name': 'FunctionName',
                'Value': 'your-function'
            }
        ],
        StartTime=datetime.now() - timedelta(days=1),
        EndTime=datetime.now(),
        Period=3600,
        Statistics=['Average']
    )
    return response['Datapoints']

4.2 콜드 스타트 최소화

# Lambda 핸들러 최적화
import json
import boto3

# 전역 변수로 클라이언트 초기화
dynamodb = boto3.resource('dynamodb')
table = dynamodb.Table('your-table')

def lambda_handler(event, context):
    # 핸들러 로직
    return {
        'statusCode': 200,
        'body': json.dumps('Success')
    }

5. 모니터링 및 알림 설정

5.1 CloudWatch 대시보드

# CloudWatch 대시보드 생성
import boto3

def create_cloudwatch_dashboard():
    cloudwatch = boto3.client('cloudwatch')
    dashboard_body = {
        "widgets": [
            {
                "type": "metric",
                "properties": {
                    "metrics": [
                        ["AWS/EC2", "CPUUtilization", "InstanceId", "i-1234567890abcdef0"]
                    ],
                    "period": 300,
                    "stat": "Average",
                    "region": "ap-northeast-2",
                    "title": "EC2 CPU Utilization"
                }
            }
        ]
    }

    response = cloudwatch.put_dashboard(
        DashboardName='CostOptimization',
        DashboardBody=json.dumps(dashboard_body)
    )
    return response

5.2 비용 알림 설정

# 비용 알림 생성
import boto3

def create_cost_alert():
    cloudwatch = boto3.client('cloudwatch')
    response = cloudwatch.put_metric_alarm(
        AlarmName='MonthlyCostAlert',
        MetricName='EstimatedCharges',
        Namespace='AWS/Billing',
        Statistic='Maximum',
        Period=21600,
        EvaluationPeriods=1,
        Threshold=100.0,
        ComparisonOperator='GreaterThanThreshold',
        AlarmActions=['arn:aws:sns:region:account-id:your-topic']
    )
    return response

추가 팁

  1. 리소스 태깅: 모든 리소스에 태그를 추가하여 비용 추적
  2. 예약 인스턴스: 장기 사용 예상 시 예약 인스턴스 활용
  3. 리소스 정리: 사용하지 않는 리소스 정기적으로 삭제
  4. 멀티 리전 전략: 비용 효율적인 리전 선택
  5. 서버리스 아키텍처: 가능한 경우 서버리스 서비스 활용

결론

AWS 비용을 효과적으로 관리하는 것은 지속 가능한 서비스 운영에 매우 중요합니다. 이 글에서 소개한 5가지 실천법을 통해 비용을 최적화하고, 더 효율적인 백엔드 서비스를 구축할 수 있습니다. 추가적인 질문이나 궁금한 점이 있으시면 댓글로 남겨주세요!

댓글

이 블로그의 인기 게시물

Django에서 트랜잭션 관리하기

Django에서 트랜잭션 관리하기 안녕하세요! 오늘은 Django에서 데이터베이스 트랜잭션을 효과적으로 관리하는 방법에 대해 알아보겠습니다. 1. 트랜잭션의 중요성 트랜잭션은 데이터베이스의 일관성과 무결성을 보장하는 중요한 개념입니다. Django에서는 여러 가지 방법으로 트랜잭션을 관리할 수 있습니다. 1.1 기본 개념 원자성(Atomicity) : 트랜잭션은 모두 실행되거나 모두 실행되지 않아야 합니다. 일관성(Consistency) : 트랜잭션 전후로 데이터베이스의 일관성이 유지되어야 합니다. 격리성(Isolation) : 동시에 실행되는 트랜잭션들이 서로 영향을 주지 않아야 합니다. 지속성(Durability) : 완료된 트랜잭션의 결과는 영구적으로 저장되어야 합니다. 2. Django의 트랜잭션 관리 2.1 기본 설정 # settings.py DATABASES = { 'default': { 'ENGINE': 'django.db.backends.postgresql', 'NAME': 'mydatabase', 'USER': 'myuser', 'PASSWORD': 'mypassword', 'HOST': 'localhost', 'PORT': '5432', 'ATOMIC_REQUESTS': True, # 모든 뷰를 트랜잭션으로 래핑 } } 2.2 데코레이터 사용 from django.db import transaction @transaction.atomic def create_order(user, items): order = Order.objects.create(user=...

AWS S3 + CloudFront로 정적 파일 서빙 완전 가이드

AWS S3 + CloudFront로 정적 파일 서빙 완전 가이드 안녕하세요! 오늘은 AWS S3와 CloudFront를 사용하여 정적 파일을 효율적으로 서빙하는 방법에 대해 알아보겠습니다. 왜 S3와 CloudFront를 사용할까요? 높은 가용성 : AWS의 글로벌 인프라를 활용 빠른 전송 속도 : CloudFront의 CDN 기능으로 전 세계 사용자에게 빠른 전송 비용 효율성 : 사용한 만큼만 지불 보안 : AWS의 보안 기능 활용 확장성 : 트래픽 증가에 자동 대응 1. S3 버킷 설정 1.1 버킷 생성 및 설정 import boto3 def create_s3_bucket(): s3 = boto3.client('s3') # 버킷 생성 bucket_name = 'your-static-files-bucket' s3.create_bucket( Bucket=bucket_name, CreateBucketConfiguration={ 'LocationConstraint': 'ap-northeast-2' } ) # 버킷 정책 설정 bucket_policy = { "Version": "2012-10-17", "Statement": [ { "Sid": "PublicReadGetObject", "Effect": "Allow", "Principal": "*", "Action": "s3:GetObje...

Python에서 asyncio 완전 정복 (await, async, gather 등)

어휴, 요즘 파이썬으로 비동기 프로그래밍 하는 재미에 푹 빠졌어요! 특히 asyncio 는 정말 마법 같더라고요. 처음엔 좀 낯설었는데, 익숙해지니까 속도 향상이 눈에 띄게 느껴져서 완전 반해버렸습니다. 이 글에선 제가 asyncio 를 배우면서 깨달은 점들을 풀어놓을게요. 혹시 비동기 프로그래밍이 뭔지 잘 모르시겠다면, 간단히 말해 여러 작업을 동시에 처리해서 프로그램 속도를 엄청나게 높이는 기술이라고 생각하시면 돼요. 마치 여러 요리사가 동시에 음식을 만들어서 손님에게 빨리 제공하는 것과 비슷하죠! 일단 async 와 await 라는 녀석들이 핵심인데요, async 는 함수 앞에 붙여서 "얘는 비동기 함수야!"라고 선언하는 거예요. 그리고 await 는 다른 비동기 함수가 끝날 때까지 기다리라고 지시하는 역할을 하죠. 예를 들어, 네트워크에서 데이터를 가져오는 함수가 있다면, await 를 사용해서 데이터가 다 가져올 때까지 기다렸다가 다음 작업을 진행할 수 있어요. 그 동안 다른 작업을 처리할 수 있으니, 마치 멀티태스킹을 하는 것처럼 느껴져요. 신기하지 않나요? 그리고 asyncio.gather 는 여러 비동기 함수를 동시에 실행하고 결과를 모아주는 아주 유용한 친구입니다. 제가 웹사이트 여러 개에서 데이터를 동시에 가져와야 할 때 정말 요긴하게 썼어요. 하나씩 순서대로 가져오는 것보다 훨씬 빠르더라고요! 마치 여러 개의 탭을 동시에 열어놓고 작업하는 것과 같다고 생각하시면 될 것 같아요. 실제로 제가 썼던 코드를 보여드릴게요. 세 개의 웹사이트에서 데이터를 가져오는 예제인데요. (아래 코드 삽입) 이 코드를 보시면, fetch_data 함수가 각 웹사이트에서 데이터를 가져오는 역할을 하고, asyncio.gather 가 이 함수들을 동시에 실행하도록 도와주는 것을 볼 수 있을 거예요. asyncio.sleep(2) 는 네트워크 지연을 시뮬레이션하기 위해 넣...