[AWS] 스토리지

스토리지 서비스

블록 스토리지 

EBS, instance storage

일반적으로 인스턴스 하나에만 연결됨

 

파일 스토리지

EFS, FSx

NAS - 네트워크 파일 시스템 

동시에 여러 인스턴스에서 마운트해서 사용이 가능

 

객체 스토리지

S3, Glacier

심플 스토리지

99.999999999%

서버에 마운트 하지는 않고 인터넷을 통해서 가져오는 형식

 

---

S3

S3 비용요소

아래 3가지는 사용한 만큼만 지불

월별 GB

다른 리전 또는 인터넷으로 전송

PUT, COPY, POST, LIST, GET 요청

 

아래 2가지에 대해서는 지불할 필요 없음

S3로 수신

동일한 리전 내 EC2 Ehsms CloudFront로 전송

 

S3 스토리지 클래스

아래로 갈수록 저장은 저렴해지고 요청은 비싸진다.

 

• S3 Standard - 자주 액세스 하는 데이터의 일반적인 스토리지 용도로 사용합니다. 저장은 비싸지만 요청이 가장 저렴하다.

• S3 Intelligent-Tiering - 액세스 패턴이 바뀌거나 알 수 없는 데이터에 대해 사용합니다.

• S3 Standard-IA - 수명이 길지만 액세스 빈도가 낮은 데이터에  최적화되었습니다.

• S3 One Zone-IA - 단일 가용영역에 저장할 수 있는 수명이 길고 액세스 빈도가 낮은 데이터에 사용합니다. 중요도가 떨어지고 다시 생산할 수 있는 데이터에 사용 (원본은 따로 있는 인코딩된 동영상)

• S3 Glacier Instant Retrieval - 드물게 액세스 하지만 몇 밀리초 만에 복원해야 하는 아카이브 데이터에 사용합니다. 저장에 대한 비용은 조금 더 저렴하지만 요청에 대한 비용은 비싸다. Glacier임에도 바로 꺼내 볼 수 있다.

• S3 Glacier Flexible Retrieval - 몇 분 정도에서 몇 시간까지 다양한 액세스 시간에서 비용의 균형을 조정하는 가장 유연한 검색 옵션과 무료 대량 검색 기능을 제공합니다. 정말 저렴하게 저장이 가능한 대신에 바로 꺼내 볼 수 없다.(3~5시간)

• S3 Glacier Deep Archive - 장기 콜드 스토리지 아카이브 및 디지털 보존에 사용합니다. 객체는 12시간 이내에 복원할 수 있습니다. 더 저렴하다.

 

사용자들이 데이터를 접근하는 패턴을 알고있다면 수명주기를 설정해서 일정 기간이 지나면 클래스를 변경하여 효율적으로 사용할 수 있다. 그렇지 않다면 S3 Intelligent-Tiering 사용

 

Transfer Acceleration

전 세계에 분산된 CloudFront 엣지 로케이션을 사용하여 데이터를 S3 버킷으로 빠르게 전송

멀티파트 업로드

 S3가 개별 조각으로부터 전체 객체를 다시 생성

S3 Access Point Solution

버킷정책에 모든걸 다 담으면 관리하기 힘들다. 따라서 각각의 S3의 출입문에 액세스 포인트 정책을 따로 만든다.

각 액세스 포인트에는 해당 액세스 포인트를 통해 이루어진 모든 요청에 대해 Amazon S3가 적용하는 고유한 권한 및 네트워크 제어가 있다.

 

---

공유 파일 시스템

EFS

리눅스에서만 가능(NFSv4 프로토콜)

마운트 타겟을 만들어서 사용

EFS가 S3보다는 상대적으로 비싸다.

 

FSx

다른 OS용 스토리지 공유 서비스

 

---

데이터 마이그레이션 도구

온프레미스에서 클라우드로 전환할 때

 

오프라인

AWS snowball

신청하면 오프라인으로 물리적인 스토리지가 배송되고 데이터를 옮겨간다.

페타바이트 단위의 데이터는 네트워크보다 snowball이 더 빠르다.

 

온라인

datasync

마이그레이션 / 하이브리드 클라우드

데이터 전송과 관련된 수동 작업으로 인해 마이그레이션이 느려지고 IT 운영에 부담

 DataSync는 온프레미스 스토리지와 Amazon S3 및 Amazon EFS 또는 Windows File Server용 FSx 간의 대량 데이터 이전을 촉진

 

storage Gateway

온프레미스 소프트웨어 어플라이언스와 클라우드 기반 스토리지를 연결하여 데이터 보안 기능으로 온프레미스 IT 환경과AWS 스토리지 인프라 사이의 원활한 통합을 제공

AWS Cloud에 데이터를 저장하여 데이터 보안 유지에 도움이 되는 확장 가능하면서 비용 효율적인 스토리지를 구현