[AWS SAA] 23. 데이터 마이그레이션

AWS 데이터 마이그레이션 도구

사용할 도구를 선택하기 전에 다음 정보를 파악해야 합니다.

• 데이터를 이동하려는 위치
• 데이터 이동 관련 사용 사례
• 이동하려는 데이터의 유형
• 사용 가능한 네트워크 리소스

AWS는 데이터 집합(파일, 데이터베이스, 머신 이미지, 블록 볼륨 또는 테이프 백업)을 마이그레이션하는 데 사용할 수 있는 다양한 서비스와 AWS Pratner 도구를 제공합니다. 이 모듈에서는 다음 도구에 대해 알아봅시다.

1. AWS Storage Gateway
   AWS 스토리지를 온프레미스에 간단하게 도입할 수 있도록 해줍니다. Storage Gateway를 사용하면 온프레미스 애플리케이션을 AWS 스토리지에 원활하게 연결하여 확장할 수 있습니다. Storage Gateway는 SMB(Server Message Block), NFS(Network File Sharing), iSCSI(Internet Small Computer Interface) 등의 여러 파일 전송 프로토콜을 지원합니다.
   
   
2. AWS DataSync
   온프레미스 스토리지와 S3, EFS, 또는 FSx for Windows File Server 간에 데이터를 원활하게 이동할 수 있는 데이터 전송 서비스입니다.
   
   
3. AWS Transfer Family
   보안 쉘 파일 전송 프로토콜(SFTP)을 사용하여 S3에서 파일을 전송 및 수신할 수 있습니다.
   
   
4. AWS Snow Family
   물리적 보안 전송용으로 설계된 엣지 컴퓨팅, 데이터 마이그레이션 또는 엣지 스토리지 디바이스 그룹입니다.
   
   

자세한 내용

 

AWS Storage Gateway

온프레미스 소프트웨어 어플라이언스를 클라우드 기반 스토리지와 연결해 주는 AWS Storage Gateway에서는 온프레미스IT 환경과 AWS 스토리지 인프라 간에 데이터 보안 기능을 원활하게 통합할 수 있습니다. 지연 시간이 짧은 Storage Gateway 어플라이언스를 통해 클라우드 데이터에 액세스할 수 있습니다.

 

이 서비스를 사용하여 AWS 클라우드에 데이터를 저장하면 비용 효율적인 확장 가능 스토리지에서 데이터 보안을 유지할 수 있습니다. Storage Gateway는 IAM, AWS KMS, AWS CloudTrail 및 Amazon CloudWatch와 동합되는 파일 기반, 볼륨 기반 및 테이프 기반 스토리지 솔루션을 제공합니다.

 

Storage Gateway 유형

사용자의 워크로드에 가장 적합한 Storage Gateway 유형을 선택하야 합니다. 유형의 종류는 다음과 같습니다.

1. S3 File Gateway는 S3에 파일을 객체로 저장하는 데 사용할 수 있는 파일 인터페이스를 제공합니다. 업계 표준 NFS 및 SMB 파일 프로토콜을 사용할 수 있습니다. 그러면 데이터 센터나 EC2에서 NFS 및 SMB를 통해 파일에 액세스할 수도 있고, S3에서 NFS 및 SMB를 통해 파일에 액세스할 수도 있고, S3에서 해당 파일(객체)에 직접 액세스할 수도 있습니다.
   
   
2. FSx File Gateway에서는 신뢰성이 우수한 확장 가능 완전관리형 파일 공유에 온프레미스에서 빠르게(지연 시간이 짧음) 액세스할 수 있습니다. 이 Gateway는 업계 표준 SMB 프로토콜을 사용합니다. 전체 NTFS 지원, 섀도우 복사본, ACL 등의 Microsoft Windows 기능을 활용하여 FSx에서 파일 데이터를 저장 및 액세스할 수 있습니다.
   
   
3. Tape Gateway는 온프레미스 백업 애플리케이션용으로 가상 테이프 드라이브의 iSCSI 기반 가상 테이프 라이브러리(VTL) 및 가상 미디어 체인저를 제공합니다. Tape Gateway는 S3에 가상 테이프를 저장하고 새 테이프를 자동으로 생성하므로 테이프 관리와 AWS로의 전환을 간편하게 진행할 수 있습니다.
   
   
4. Volume Gateway는 iSCSI 프로토콜을 사용하여 애플리케이션의 블록 스토리지 볼륨을 제공합니다. 이러한 볼륨에 기록된 데이터를 볼륨의 특정 시점 스냅샷으로 비동기 백업한 다음 EBS 스냅샷으로 클라우드에 저장할 수 있습니다. 이 Gateway는 서비스의 스냅샷 스케줄러나 AWS Backup 서비스를 사용하여 온프레미스 Volume Gateway 볼륨을 백업할 수 있습니다.

 

Storage Gateway 아키텍처

Storage Gateway 어플라이언스에서는 다음 프로토콜을 사용하여 로컬 데이터에 연결할 수 있습니다.

• NFS 또는 SMB(파일)
• iSCSI(볼륨)
• iSCSI VTL(테이프)

 

Storage Gateway 어플라이언스는 S3 File Gateway, FSx File Gateway, Tape Gateway, Volume Gateway의 4개 모드 중 하나로 실행됩니다. Storage Gateway를 사용해 AWS로 이동한 데이터는 Storage Gateway 관리형 서비스를 통해 다음 대상 위치로 전송할 수 있습니다.

• S3(S3 File Gateway, Tape Gateway)
• S3 Glacier(S3 File Gateway, Tape Gateway)
• FSx for Windows File Server(FSx File Gateway)
• EBS(Volume Gateway)

AWS Backup을 사용하여 Volume Gateway에 볼륨 스냅샷을 예약할 수 있습니다.

 

AWS DataSync

데이터 전송 관련 수동 테스크를 수행하면 마이그레이션 속도가 느려지고 IT 운영 부담이 증가할 수 있습니다. DataSync를 사용하면 온프레미스 스토리지와 S3, EFS 또는 FSx for Windows File Server 간에 대량의 데이터를 원활하게 이동할 수 있습니다. 전송되는 데이터는 기본적으로 TSL 1.2를 사용하여 암호화됩니다. DataSync는 스크립팅 복사 작업, 전송 일정 수립 및 모니터링, 데이터 유효성 검사, 네트워크 활용도 최적화를 자동으로 처리합니다.

 

SMB 기반 데이터 저장소 및 콘텐츠 리포지토리를 파일 서버 및 NAS 어레이에서 분석을 위해 S3 및 EFS로 이동함에 따라 온프레미스 스토리지 인프라를 줄입니다.

 

 

DataSync는 여러 공유 파일 시스템에 연결해 여러 태스크를 실행할 수 있는 단일 소프트웨어 에이전트로 배포됩니다. 이 소프트웨어 에이전트는 일반적으로 가상 인스턴스를 통해 온프레미스에 배포되어 광역 네트워크(WAN)를 통한 AWS로의 데이터 전송을 처리합니다. 그리고 AWS 측에서는 에이전트가 DataSync 서비스 인프라에 연결됩니다. DataSync는 서비스이므로 고객이 클라우드에서 인프라를 설정하거나 유지 관리할 필요가 없습니다. 콘솔에서 직접 DataSync 구성을 관리하면 됩니다.

 

AWS Snow 패밀리 서비스 모델

1. AWS Snowcone은 견고하고 안전하며, 전통적인 데이터 센터의 외부에서 사용할 수 있도록 특별히 설계되었습니다. 크기가 작은 덕분에 좁은 공간이나 휴대성이 요구되고 네트워크 연결을 신뢰할 수 없는 상황에서 효과적으로 사용할 수 있습니다.
   
   
2.  Snowball Edge는 데이터 전송을 위해 코드를 작성하거나 하드웨어를 구매할 필요가 없는 페타바이트 규모의 데이터 전송 옵션입니다. 콘솔에서 작업을 생성하기만 하면 Snowball 어플라이언스가 고객에게 배송됩니다. 어플라이언스를 로컬네트워크에 연결하고 파일을 어플라이언스로 직접 전송합니다. 디바이스를 반환할 준비가 되면 E lnk 배송 레이블이 반환 주소로 자동으로 업데이트 됩니다. 그러므로 디바이스가 올바른 AWS 시설로 배송됩니다.
   
   
3. Snowball Edge Optimized는 원격의 외진 환경 또는 네트워크 연결이 끊기거나 열악한 환경에서 추가 컴퓨팅, 메모리 및 스토리지 기능이 필요한 엣지 처리 사용 사례에 적합합니다.