기본 콘텐츠로 건너뛰기

AWS S3 + CloudFront로 정적 파일 서빙 완전 가이드

AWS S3 + CloudFront로 정적 파일 서빙 완전 가이드

안녕하세요! 오늘은 AWS S3와 CloudFront를 사용하여 정적 파일을 효율적으로 서빙하는 방법에 대해 알아보겠습니다.

왜 S3와 CloudFront를 사용할까요?

  1. 높은 가용성: AWS의 글로벌 인프라를 활용
  2. 빠른 전송 속도: CloudFront의 CDN 기능으로 전 세계 사용자에게 빠른 전송
  3. 비용 효율성: 사용한 만큼만 지불
  4. 보안: AWS의 보안 기능 활용
  5. 확장성: 트래픽 증가에 자동 대응

1. S3 버킷 설정

1.1 버킷 생성 및 설정

import boto3

def create_s3_bucket():
    s3 = boto3.client('s3')

    # 버킷 생성
    bucket_name = 'your-static-files-bucket'
    s3.create_bucket(
        Bucket=bucket_name,
        CreateBucketConfiguration={
            'LocationConstraint': 'ap-northeast-2'
        }
    )

    # 버킷 정책 설정
    bucket_policy = {
        "Version": "2012-10-17",
        "Statement": [
            {
                "Sid": "PublicReadGetObject",
                "Effect": "Allow",
                "Principal": "*",
                "Action": "s3:GetObject",
                "Resource": f"arn:aws:s3:::{bucket_name}/*"
            }
        ]
    }

    s3.put_bucket_policy(
        Bucket=bucket_name,
        Policy=json.dumps(bucket_policy)
    )

    return bucket_name

1.2 CORS 설정

def set_cors_policy():
    s3 = boto3.client('s3')

    cors_configuration = {
        'CORSRules': [{
            'AllowedHeaders': ['*'],
            'AllowedMethods': ['GET', 'HEAD'],
            'AllowedOrigins': ['*'],
            'ExposeHeaders': ['ETag'],
            'MaxAgeSeconds': 3000
        }]
    }

    s3.put_bucket_cors(
        Bucket='your-static-files-bucket',
        CORSConfiguration=cors_configuration
    )

2. CloudFront 배포 설정

2.1 CloudFront 배포 생성

def create_cloudfront_distribution():
    cloudfront = boto3.client('cloudfront')

    distribution_config = {
        'CallerReference': str(uuid.uuid4()),
        'DefaultRootObject': 'index.html',
        'Origins': {
            'Quantity': 1,
            'Items': [{
                'Id': 'S3-Origin',
                'DomainName': 'your-static-files-bucket.s3.ap-northeast-2.amazonaws.com',
                'S3OriginConfig': {
                    'OriginAccessIdentity': ''
                }
            }]
        },
        'DefaultCacheBehavior': {
            'TargetOriginId': 'S3-Origin',
            'ForwardedValues': {
                'QueryString': False,
                'Cookies': {'Forward': 'none'}
            },
            'TrustedSigners': {
                'Enabled': False,
                'Quantity': 0
            },
            'ViewerProtocolPolicy': 'redirect-to-https',
            'MinTTL': 3600
        },
        'Enabled': True
    }

    response = cloudfront.create_distribution(
        DistributionConfig=distribution_config
    )

    return response['Distribution']['Id']

2.2 캐시 정책 설정

def set_cache_policy():
    cloudfront = boto3.client('cloudfront')

    cache_policy = {
        'Name': 'StaticFilesCachePolicy',
        'Comment': 'Cache policy for static files',
        'DefaultTTL': 86400,  # 24 hours
        'MaxTTL': 604800,     # 7 days
        'MinTTL': 3600,       # 1 hour
        'ParametersInCacheKeyAndForwardedToOrigin': {
            'EnableAcceptEncodingGzip': True,
            'EnableAcceptEncodingBrotli': True,
            'HeadersConfig': {
                'HeaderBehavior': 'none'
            },
            'CookiesConfig': {
                'CookieBehavior': 'none'
            },
            'QueryStringsConfig': {
                'QueryStringBehavior': 'none'
            }
        }
    }

    response = cloudfront.create_cache_policy(
        CachePolicyConfig=cache_policy
    )

    return response['CachePolicy']['Id']

3. Django 설정

3.1 Django Storage 설정

# settings.py
AWS_ACCESS_KEY_ID = 'your-access-key'
AWS_SECRET_ACCESS_KEY = 'your-secret-key'
AWS_STORAGE_BUCKET_NAME = 'your-static-files-bucket'
AWS_S3_CUSTOM_DOMAIN = f'{AWS_STORAGE_BUCKET_NAME}.s3.amazonaws.com'
AWS_S3_OBJECT_PARAMETERS = {
    'CacheControl': 'max-age=86400',
}
AWS_LOCATION = 'static'

STATICFILES_STORAGE = 'storages.backends.s3boto3.S3Boto3Storage'
STATIC_URL = f'https://{AWS_S3_CUSTOM_DOMAIN}/{AWS_LOCATION}/'

3.2 정적 파일 업로드

from storages.backends.s3boto3 import S3Boto3Storage

class StaticStorage(S3Boto3Storage):
    location = 'static'
    default_acl = 'public-read'

class MediaStorage(S3Boto3Storage):
    location = 'media'
    default_acl = 'public-read'
    file_overwrite = False

4. 파일 업로드 및 관리

4.1 파일 업로드

def upload_to_s3(file_path, s3_path):
    s3 = boto3.client('s3')

    try:
        s3.upload_file(
            file_path,
            'your-static-files-bucket',
            s3_path,
            ExtraArgs={
                'ACL': 'public-read',
                'CacheControl': 'max-age=86400'
            }
        )
        return True
    except Exception as e:
        print(f"Error uploading file: {str(e)}")
        return False

4.2 파일 삭제

def delete_from_s3(s3_path):
    s3 = boto3.client('s3')

    try:
        s3.delete_object(
            Bucket='your-static-files-bucket',
            Key=s3_path
        )
        return True
    except Exception as e:
        print(f"Error deleting file: {str(e)}")
        return False

5. 성능 최적화

5.1 Gzip 압축 설정

def enable_gzip_compression():
    s3 = boto3.client('s3')

    compression_rules = {
        'Rules': [
            {
                'ApplyServerSideEncryptionByDefault': {
                    'SSEAlgorithm': 'AES256'
                },
                'ID': 'EnableCompression',
                'Priority': 1,
                'Filter': {
                    'Prefix': ''
                },
                'Transitions': [],
                'Status': 'Enabled'
            }
        ]
    }

    s3.put_bucket_lifecycle_configuration(
        Bucket='your-static-files-bucket',
        LifecycleConfiguration=compression_rules
    )

5.2 캐시 무효화

def invalidate_cloudfront_cache(paths):
    cloudfront = boto3.client('cloudfront')

    response = cloudfront.create_invalidation(
        DistributionId='your-distribution-id',
        InvalidationBatch={
            'Paths': {
                'Quantity': len(paths),
                'Items': paths
            },
            'CallerReference': str(uuid.uuid4())
        }
    )

    return response['Invalidation']['Id']

6. 보안 설정

6.1 버킷 정책

def update_bucket_policy():
    s3 = boto3.client('s3')

    bucket_policy = {
        "Version": "2012-10-17",
        "Statement": [
            {
                "Sid": "AllowCloudFrontServicePrincipal",
                "Effect": "Allow",
                "Principal": {
                    "Service": "cloudfront.amazonaws.com"
                },
                "Action": "s3:GetObject",
                "Resource": "arn:aws:s3:::your-static-files-bucket/*",
                "Condition": {
                    "StringEquals": {
                        "AWS:SourceArn": "arn:aws:cloudfront::account-id:distribution/your-distribution-id"
                    }
                }
            }
        ]
    }

    s3.put_bucket_policy(
        Bucket='your-static-files-bucket',
        Policy=json.dumps(bucket_policy)
    )

6.2 Origin Access Identity 설정

def create_origin_access_identity():
    cloudfront = boto3.client('cloudfront')

    response = cloudfront.create_cloud_front_origin_access_identity(
        CloudFrontOriginAccessIdentityConfig={
            'CallerReference': str(uuid.uuid4()),
            'Comment': 'Access identity for static files'
        }
    )

    return response['CloudFrontOriginAccessIdentity']['Id']

7. 모니터링 및 로깅

7.1 CloudFront 로깅 설정

def enable_cloudfront_logging():
    cloudfront = boto3.client('cloudfront')

    logging_config = {
        'Enabled': True,
        'IncludeCookies': False,
        'Bucket': 'your-logging-bucket.s3.amazonaws.com',
        'Prefix': 'cloudfront-logs/'
    }

    cloudfront.update_distribution(
        DistributionConfig={
            'CallerReference': str(uuid.uuid4()),
            'DefaultRootObject': 'index.html',
            'Origins': {
                'Quantity': 1,
                'Items': [{
                    'Id': 'S3-Origin',
                    'DomainName': 'your-static-files-bucket.s3.amazonaws.com',
                    'S3OriginConfig': {
                        'OriginAccessIdentity': ''
                    }
                }]
            },
            'DefaultCacheBehavior': {
                'TargetOriginId': 'S3-Origin',
                'ForwardedValues': {
                    'QueryString': False,
                    'Cookies': {'Forward': 'none'}
                },
                'ViewerProtocolPolicy': 'redirect-to-https',
                'MinTTL': 3600
            },
            'Logging': logging_config,
            'Enabled': True
        },
        Id='your-distribution-id'
    )

결론

AWS S3와 CloudFront를 사용하여 정적 파일을 효율적으로 서빙하는 방법을 알아보았습니다. 이 설정을 통해 전 세계 사용자에게 빠르고 안정적인 파일 서비스를 제공할 수 있습니다. 추가적인 질문이나 궁금한 점이 있으시면 댓글로 남겨주세요!

라벨:

댓글

댓글 쓰기

이 블로그의 인기 게시물

Django에서 트랜잭션 관리하기

Django에서 트랜잭션 관리하기 안녕하세요! 오늘은 Django에서 데이터베이스 트랜잭션을 효과적으로 관리하는 방법에 대해 알아보겠습니다. 1. 트랜잭션의 중요성 트랜잭션은 데이터베이스의 일관성과 무결성을 보장하는 중요한 개념입니다. Django에서는 여러 가지 방법으로 트랜잭션을 관리할 수 있습니다. 1.1 기본 개념 원자성(Atomicity) : 트랜잭션은 모두 실행되거나 모두 실행되지 않아야 합니다. 일관성(Consistency) : 트랜잭션 전후로 데이터베이스의 일관성이 유지되어야 합니다. 격리성(Isolation) : 동시에 실행되는 트랜잭션들이 서로 영향을 주지 않아야 합니다. 지속성(Durability) : 완료된 트랜잭션의 결과는 영구적으로 저장되어야 합니다. 2. Django의 트랜잭션 관리 2.1 기본 설정 # settings.py DATABASES = { 'default': { 'ENGINE': 'django.db.backends.postgresql', 'NAME': 'mydatabase', 'USER': 'myuser', 'PASSWORD': 'mypassword', 'HOST': 'localhost', 'PORT': '5432', 'ATOMIC_REQUESTS': True, # 모든 뷰를 트랜잭션으로 래핑 } } 2.2 데코레이터 사용 from django.db import transaction @transaction.atomic def create_order(user, items): order = Order.objects.create(user=...
댓글 쓰기
자세한 내용 보기

Python에서 asyncio 완전 정복 (await, async, gather 등)

어휴, 요즘 파이썬으로 비동기 프로그래밍 하는 재미에 푹 빠졌어요! 특히 asyncio 는 정말 마법 같더라고요. 처음엔 좀 낯설었는데, 익숙해지니까 속도 향상이 눈에 띄게 느껴져서 완전 반해버렸습니다. 이 글에선 제가 asyncio 를 배우면서 깨달은 점들을 풀어놓을게요. 혹시 비동기 프로그래밍이 뭔지 잘 모르시겠다면, 간단히 말해 여러 작업을 동시에 처리해서 프로그램 속도를 엄청나게 높이는 기술이라고 생각하시면 돼요. 마치 여러 요리사가 동시에 음식을 만들어서 손님에게 빨리 제공하는 것과 비슷하죠! 일단 async 와 await 라는 녀석들이 핵심인데요, async 는 함수 앞에 붙여서 "얘는 비동기 함수야!"라고 선언하는 거예요. 그리고 await 는 다른 비동기 함수가 끝날 때까지 기다리라고 지시하는 역할을 하죠. 예를 들어, 네트워크에서 데이터를 가져오는 함수가 있다면, await 를 사용해서 데이터가 다 가져올 때까지 기다렸다가 다음 작업을 진행할 수 있어요. 그 동안 다른 작업을 처리할 수 있으니, 마치 멀티태스킹을 하는 것처럼 느껴져요. 신기하지 않나요? 그리고 asyncio.gather 는 여러 비동기 함수를 동시에 실행하고 결과를 모아주는 아주 유용한 친구입니다. 제가 웹사이트 여러 개에서 데이터를 동시에 가져와야 할 때 정말 요긴하게 썼어요. 하나씩 순서대로 가져오는 것보다 훨씬 빠르더라고요! 마치 여러 개의 탭을 동시에 열어놓고 작업하는 것과 같다고 생각하시면 될 것 같아요. 실제로 제가 썼던 코드를 보여드릴게요. 세 개의 웹사이트에서 데이터를 가져오는 예제인데요. (아래 코드 삽입) 이 코드를 보시면, fetch_data 함수가 각 웹사이트에서 데이터를 가져오는 역할을 하고, asyncio.gather 가 이 함수들을 동시에 실행하도록 도와주는 것을 볼 수 있을 거예요. asyncio.sleep(2) 는 네트워크 지연을 시뮬레이션하기 위해 넣...
댓글 쓰기
자세한 내용 보기