SAA-C03 핵심 #19, Storage Gateway & DataSync

Storage Gateway란?

• 클라우드 스토리지 서비스를 온프레미스에 제공할 수 있도록 가교 역할을 하는 서비스
• 온프레미스에 클라우드 스토리지에 대한 액세스 권한을 제공할 수 있음
• 이름이 Storage 'Gateway'인 이유는 Storage Gateway 자체가 스토리지의 역할을 하는 것이 아닌 스토리지(S3)의 Gateway 역할을 하기 때문
• iSCSI, SMB, NFS와 같은 표준 스토리지 프로토콜 제공
• Volume Gateway의 Stored Volume을 제외하고 나머지 유형은 AWS에 EC2를 이용한 Gateway를 생성하여 이를 Mount Point로 활용 가능
• 3가지 종류의 Storage Gateway 존재
  
  • File Gateway
  • Volume Gateway
  • Tape Gateway
• 모든 Storage Gateway는 말그대로 'Gateway'를 생성해야 함
  
  • 대상에는 EC2 혹은 하드웨어 어플라이언스가 해당될 수 있음
  • 하드웨어 어플라이언스가 없다면 Storage Gateway Hardward Appliance를 Amazon.com에서 구매하여 활용할 수 있음

 

File Gateway

• NFS / SMB과 같은 파일 프로토콜을 이용해 S3에서 객체를 저장 및 검색할 수 있도록 기능을 제공하는 Storage Gateway 유형
• S3를 스토리지로 사용하며 온프레미스에 배포된 VMware 기반 Gateway(VMware ESXi, Microsoft Hyper-V 등)을 통해 데이터를 저장하고 이를 직접 액세스할 수 있음
• Amazon S3 Standard, S3 Intelligent-Tiering, S3 Standard-IA 및 S3 One Zone-IA 지원
• S3에 저장되는 만큼 S3에 파일을 업로드할 때 파일을 S3 객체로 변환함
• S3에 오브젝트로 관리되는 만큼 S3의 다른 기능(스토리지 클래스, 수명 주기 관리, 버전 관리)을 사용할 수 있음
• 최근에 사용된 데이터는 파일 게이트웨이에 캐시로 저장됨

 

FSx File Gateway

• SMB를 이용해 온프레미스에서 Amazon FSx for Windows File Server에 접근할 수 있는 Storage Gateway 유형
• 파일 읽기 및 쓰기 등의 파일 시스템 작업은 로컬 캐시에서 수행하고, FSx File 게이트웨이는 변경된 데이터를 백그라운드에서 Amazon FSx for Windows File Server에 동기화
• Amazon FSx가 SMB를 지원함에도 스토리지 게이트웨이를 두는 이유는 접근이 빈번한 데이터에 대해 로컬 캐시를 게이트웨이에 둘 수 있기 때문

 

Volume Gateway

• iSCSI 프로토콜을 사용하여 S3에 블록 스토리지를 저장할 수 있게 해주는 Storage Gateway 유형
  
  • EBS Snapshot 형식으로 저장됨
• Volume Gateway 1개당 최대 32개의 볼륨을 지원함
• 두 가지 유형으로 나뉨
  
  • Cached Volume : S3를 기본 데이터 스토리지로 사용하되, 자주 액세스하는 데이터를 온프레미스 스토리지 게이트웨이의 캐시 및 업로드 버퍼 스토리지에 보관
  • Stored Volume : On-premise 스토리지를 기본 데이터 스토리지로 사용하고, 해당 데이터를 EBS Snapshot 형식으로 S3에 비동기 백업을 실시함
• Volume Gateway 역시 S3에 저장이 되지만 File Gateway와 달리 S3 내에서 데이터를 볼 수 없음
• Volume Gateway와 S3간 전송 데이터는 SSL을 통해 암호화되며, 저장 데이터는 Amazon S3 관리형 암호화 키(SSE-S3)를 통해 암호화됨 

 

Tape Gateway

• Tape를 활용한 백업 프로세스를 온프레미스가 아닌 클라우드에서 활용할 수 있도록 기능을 제공하는 Storage Gateway 유형
• Tape를 활용하는 만큼 VTL(가상 테이프 라이브러리)를 지원함
• 가상 테이프 데이터는 S3나 S3 Glacier에 저장될 수 있음
• iSCSI 인터페이스를 사용하여 백업을 실시함

 

AWS DataSync란?

• 온프레미스의 AWS향 스토리지 데이터 이동 및 자동화를 지원하는 서비스
• AWS Direct Connect, VPN, 인터넷 등을 통해 이동 가능
• DataSync Agent를 통해 데이터를 전송함
  
  • On-premise 스토리지 - > AWS 스토리지 : VMware, Microsoft Hyper-V 등
  • AWS 스토리지 - > AWS 스토리지 : EC2 등 
• AWS 스토리지 서비스간 데이터 이동 또한 가능
• 지원 가능 서비스(AWS 서비스간 이동)
  
  • Simple Storage Service(S3)
  • Elastic File System(Amazon EFS)
  • Amazon FSx for Windows File Server
  • Amazon FSx for Lustre 
  • Amazon FSx for OpenZFS 및 Amazon FSx for NetApp ONTAP