AWS SAA - Storages

Storages

Snow Family

보안성이 뛰어난 휴대용 장치의 모음이다.

이는 엣지에서 데이터를 수집하고 처리하기 위해 사용되거나, AWS 안팎으로 데이터를 마이그레이션 할 때 사용된다.

• Snowcone
• Snowball Edge
• Snowmobile

Data Migrations

네트워크를 통해서 전송할 수 있는 데이터에는 한계가 있기 때문에, 휴대용 장치를 사용하여 데이터를 전달한다.

Edge Computing

데이터가 엣지 로케이션에서 생성될 때 이를 처리하는 것이다.

인터넷이나 컴퓨팅이 제한된 엣지 로케이션에서 사용될 수 있다.

데이터가 생성되는 곳 아주 가까이서 그 데이터를 처리하고, AWS 에 보내게 된다.

Amazon FSx

AWS의 관리형 서비스로서 AWS에서 타사 고성능 파일 시스템을 실행할 수 있다.

Lustre 나 Windows File Server 등 타사 고성능 파일 시스템을 AWS에서 사용하고 싶은 경우, FSx 가 방법이 될 수 있다.

Amazon FSx for Windows

SMB와 NTFS 프로토콜을 지원한다.

Microsoft Active Directory 통합 기능과 ACL, 사용자 할당 기능이 있다.

이는 Linux EC2 인스턴스에도 마운트될 수 있다.

다중 AZ 환경으로 구성될 수 있다.

Amazon FSx for Lustre

대규모 컴퓨팅에 사용되는 분산 파일 시스템을 수행한다.

HPC (High Performance Computing) 의 머신 러닝에 사용된다.

비디오 처리, 재무 모델링, 전자 설계 자동화 등 컴퓨팅 작업에 주로 사용된다.

Amazon S3을 파일 시스템으로서 읽어들이고 다시 쓰기 작업을 할 수 있다.

VPN 이나 Direct Connect 를 통해 온프레미스 서버에서도 사용이 가능하다.

단일 AZ 에만 존재할 수 있다.

Deployment Options

• Scratch File System
  • 임시 저장소로서, 데이터는 복제되지 않는다.
  • 최적화 덕분에 버스트 처리량은 매우 높다.
  • 단기간 데이터를 처리해야 하거나 비용을 최적화하려 할 때 사용한다.
• Persistent File System
  • 장기 보관을 위한 파일 스토리지이다.
  • 데이터는 동일 AZ 내에서 복제된다.
  • 민감한 데이터를 오래 처리하거나 보관하는 데 사용된다.

Storage Gateway

인프라의 일부는 AWS 클라우드에 두고, 일부는 온프레미스에 있는 것이 hybrid cloud 이다.

이러한 상황에서 S3와 온프레미스 서버 등 서비스 환경을 이어주는 것이 Storage Gateway 이다.

재해 복구, 백업 및 복원, 계층화된 스토리지에 쓰인다.

Storage Gateway 는 데이터를 EBS, S3, S3 Glacier 로 가져온다.

• File Gateway
  • NFS 와 SMB 프로토콜을 사용하여 액세스 가능하도록 S3 버킷을 구성할 수 있다.
  • S3 표준, S3 IA, S3 One Zone IA 등의 스토리지 클래스 유형을 지원한다.
  • 가장 최근에 사용된 데이터는 파일 게이트웨이에 캐시된다.
  • 파일 게이트웨이는 온프레미스의 여러 서버에 장착될 수 있다.
  • 사용자 인증이 필요한 경우 온프레미스의 Active Directory 와 통합될 수 있다.
  • 온프레미스에서 Amazon FSx File System으로 직접 연결할 수도 있지만, File Gateway 를 이용하면 장점이 있다.
    • 이 경우 File Gateway는 FSx File System으로의 프록시처럼 작동한다.
    • 자주 엑세스되는 데이터를 로컬에 캐싱한다.
    • 그룹 파일 공유나 홈 디렉토리를 백엔드에서 FSx로 백업하려 할 때 유용하다.
• Volume Gateway
  • S3의 iSCSI 프로토콜을 사용하는 블록 스토리지이다.
  • EBS 스냅샷으로 백업될 수 있는데 이는 온프레미스 볼륨 복구에 도움을 줄 수 있다.
  • Cached Volumes : 최근 데이터의 액세스 지연 시간을 줄일 수 있다.
  • Stored Volumes : 전체 데이터셋이 온프레미스에서 제공된다. S3 에 백업이 예약된다.
• Tape Gateway
  • 회사가 자기테이프를 이용해 백업을 진행할 경우 이를 연결할 수 있는 게이트웨이이다.

Storage Gateway Hardware Appliance

Storage Gateway 가 설치되는 곳은 기업 데이터 센터이지만, 이러한 서버가 없을 경우, AWS의 하드웨어를 사용하게 된다.

Summary

온프레미스 데이터와 클라우드 사이에 브릿지가 필요하다면, Storage Gateway 서비스를 이용한다.

네트워크 파일 시스템과 함께 Active Directory를 사용하는 인증이 필요하면, File Gateway 이다.

볼륨, 블록 스토리지, iSCSI 백업이 필요한 경우, Volume Gateway 이다.

온프레미스 가상화 시스템이 없는 경우라면, Hardware Appliance 이다.

AWS Transfer Family

Amazon S3 또는 EFS의 안팎으로 데이터를 전송하려고 하는데 FTP 프로토콜만 사용하려고 할 때 등에 이를 사용한다.

• FTP / FTPS / SFTP 의 AWS 연결을 지원한다.
• Microsoft Active Directory나 LDAP, Amazon Cognito 등의 인증 체계와 통합이 가능하다.