AWS Snow Family

아주 안전한 휴대 기기 이다.
나는 처음에 어떠한 서비스 인줄 알았는데 진짜 휴대 기기로 물리적인 장치들이였다,,, 당황 ㅋㅋ;

하여튼 이것들로 AWS 밖으로 데이터를 Migrate 할수 있다.
만약 Network 로 Migrate 를 할려고 하면 제한된 연결,,,주파수,,비용,,,등등 을해서 너무 오랜 시간이 걸린다.

이렇게 오랜 시간이 걸린다고한다,,,
그래서 우리는 Snow Family 를 사용한다.
데이터 마이그레이션 할수 있게 해주는 오프라인 기기라고 생각하면 된다.

이렇게 Client 로 부터 정보드를 Snowball 에 담고 그 정보들을 다시 import/export 해서 s3 버킷에 담는다.

SnowBall Edge(for data transfer)

Data를 AWS 와 교환하기 위해 사용한다.
TB or PB 단위를 전송하고
S3 , block storage 를 제공한다고 한다.

두개의 옵션이 있다

Snowball Edge Storage Optimized 는 80TB HDD 용량을 제공 or S3 Storage 제공

Snowball Edge Compute Optimized 는 42TB HDD or S3 storage 제공한다고 한다.

대용량 클라우드 migration , data center decommison ,disaster recovery 에 사용한다고 한다.

AWS Snowcone & SnowCone SSD

아주 작은 기기로 또한 두개의 옵션이 있다

SnowCone 은 8TB 의 HDD Storage
Snowcone SSD 는 14TB 의 SSD Storage 를 제공한다.
Snowball 사용이 적합하지 않을때 사용하면 된다고 한다.

오프라인으로 전송하거나
기기에 데이터 넣고 인터넷 연결 가능할때 센터로 연결한다. 그리고 datasync 사용해서 aws 로 전송하면 된다고 한다.

AWS Snowmobile

사진은 뭔 트럭이다.
진짜 큼;
엑사 바이트 의 데이터를 전송하고 각 Snowmobile 은 100PB 의 용량을 가지고 있어서 대용량 데이터 전송에 적합하다고한다.
10PB 보낼땐 Snowball 보다 좋다고 한다.

what is Edge computing?

에지 위치에서 데이터 생성하는 중에 그 데이터 처리하는 것이라고 한다.
edge location 은 인터넷 연결이 없거나 cloud 에서 멀리 떨어저 있는 것이라고 한다.
이러한 장소는 인터넷 접속이 어렵고 computing resource 에 쉽게 엑세스 할수 없다고 한다... (당연한말)

이때 Snowball Edge 난 Snowcone 을 사용해서 edge computing 할수 있다고 한다.

Snowball into Glacier

Snowball 을 통해 데이터를 직접 Glacier 에 불러올수 없다고 한다.
하지만 S3 에서 생명주기규칙을 만들어서 S3에 있는것을 Glacier 로 옮길수 있다고 한다.

Amazon FSx

타사 고성능 파일 시스템을 실행한다고 한다.
RDS 에서 AWS Mysql 을 실행하는것으로 생각하면 된다. 결국 FSx 에서 AWS mysql 실행한다는것과 같다고 한다.

Amazon FSx for Window (File Server)

FSx for Window 는 Window 파일 시스템 공유 드라이브 라고 한다.
SMB,NTFS 지원하고
Microsoft 의 분산 파일 시스템인 DFS 또한 지원한다고한다.
SSD,HDD 의 storage option 이 있고 On-premises 에서 접근 또한 가능하다.
S3 에 백업 가능.

Amazon FSx for Lustre

Lustre 는 분산 파일 시스템 대형 연산에 사용된다고 한다.
즉 고성능 연산에 사용한다고 한다.
똑같이 SSD,HDD 의 Storage Option 을 제공하고 Amazon S3 와 원활한 통합을 제공한다고 한다. FSx 를 통해서 S3를 읽을수 있다고함,,,
그리고 S3에 FSx 를 통해서 쓰기도 가능하다고한다.

FSx Lustre - File System Deployment Options

이걸 보면 좀 이해 갈수 있는데
Scratch File System 은 임시 스토리지이다.
복제가 안되고 높은 버스트를 가진다.
단기 처리할떄 좋다

Persistent File System 은 장기 스토ㅓ리지이고
복제 가능하다.
장기,민감한 데이터에 좋다고한다.

Amazon FSx for NetApp ONTAP

NetApp ONTAP 파일 시스템이라고 한다.
NFS,SMB,iSCSI 프로토콜과 호환되는 파일 시스템이라고 한다.
ONTAP 이나 NAS 에서 실행 중인 워크로드를 AWS 로 이전할수 있다.

Amazon FSx for OPpen ZFS

OpenZFS 파일 시스템이라고 한다.
또한 NFS 프로코톨과 호환가능하고
다들비슷하게 ZFS 에서 실행되는 워크로드를 내부적으로 AWS 로 옮길때 사용한다고 한다.

Hybrid Cloud for Storage

AWS는 Hybrid Cloud 를 권장한다고 한다.
일부는 AWS 에 있고 일부는 온프레미스에 있는것을 말한다고 한다.

Long Cloud migrations
Security
Compliance
IT Strategy ,,,
등등으로 봤을때 Hybrid 가 좋다고 한다.

S3 데이터를 온프레미스에 두려면 어떻게 해야하냐고 하는데 AWS Storage Gateway 사용해서 뭐 연결하면 된다고 한다....

AWS Storage Gateway

온프레미스와 클라우드 간의 다리이다.

Disaster recovery
backup & restore
tiered storage
on-premises cache & low-latency file access 에 사용 된다고 함.

Amazon S3 File Gateway

NFS,SMB 프로토콜 사용해서 S3 버킷에 접근가능하다.
사용된 데이터는 캐시로 저장하고
Glacier 를 제외한 모든 S3 가 지원가능하다.
하지만 당연하게 수명 주기 정책을 통해서 Glacier 로 옮길수 있다.

Gateway 에 데이터 담고 HTTPS 로 전달하는것 같다.

Amazon FSx File Gateway

Amazon FSx for Window 파일 서버에 대한 네이티브 엑세스를 제공한다.
자주 엑세스 하는 데이터의 로컬 캐시를 위함이다.

Volume Gateway

iSCSI 를 사용해서 S3를 백업하는 블록 스토리지이다.

두개의 Volume 이 있는데
Cache Volume 은 최근 데이터 엑세스 시에 지연 시간이 낮고
Stored voume 은 전체 데이터 셋이 온프레미스에 있고 주기적으로 S3 백업해야한다고 한다.

Tape Gateway

어떤곳은 진짜 물리적 테이프를 통해서 백업한다고 한다.
그래서 Tape Gateway 사용하면 이것들을 Cloud 에 저장할수 있다고 한다.

Storage Gateway - Hardware appliance

게이트웨이 실행할 가상서벅 ㅏ없을때 이거사용한다고 한다.

AWS Transfer Family

데이터 전송하려고 하는데 S3 API 는 사용하고 싶지 않을때 사용한다.
FTP 만 사용한다.

AWS DataSync

데이터를 동기화 해서 대용량 데이터를 한곳에서 다른곳으로 옮긴다고 한다.

온프레미스, 다른 클라우드에서 AWS 로 데이터 이동할떄 DataSync agent 가 필요하다고 한다.

하지만 AWS 서비스간에 데이터 이동은 DataSync 필요하지 않음.

이렇게 On-premises 에서 AWS 로 옮길땐 agent 에 담고 보내게 되고

AWS 내에서 이동할떈 필요없다.

Storage Comparison

S3: 객체 스토리지. 대부분의 AWS와 연결 가능
S3 Glacier: 객체 아카이브 스토리지
EBS volumes: 한 번에 한 개의 EC2 인스턴스에만 스토리지를 연결 할 때에는 EBS 볼륨 사용
Instance Storage: EC2 인스턴스에 직접 연결된 물리적 스토리지 (고 IOPS)
EFS: Linux 인스턴스용 네트워크 파일 시스템, 다중 가용 영역 간 마운트 하며 POSIX 파일 시스템 사용
FSx for Windows: Windows 서버용 네트워크 파일 시스템으로, Windows와의 원활한 호환성과 통합 기능 제공
FSx for Lustre: 고성능 병렬 분산 파일 시스템으로, HPC에서 계산 집약적인 워크로드에 적합
FSx for NetApp ONTAP: 관리형 NetApp ONTAP 파일 시스템으로, 다양한 운영 체제와의 높은 호환성 제공
FSx for OpenZFS: 관리형 ZFS 파일 시스템으로, Linux에 대한 원활한 호환성과 데이터 관리 기능 제공
Storage Gateway: 온프레미스 환경과 AWS 간의 연결을 제공하는 하이브리드 스토리지 서비스로, S3 및 FSx 파일 게이트웨이, 볼륨 게이트웨이 (캐시 및 저장), 테이프 게이트웨이를 지원
Transfer Family: FTP, FTPS, SFTP 프로토콜을 사용하여 Amazon S3 또는 Amazon EFS 위에서 파일 전송을 제공하는 완전 관리형 서비스
DataSync: 온프레미스 시스템과 AWS 또는 AWS 서비스 간의 예약 및 자동화된 데이터 전송을 지원하는 서비스
Snowcone / Snowball / Snowmobile: 대량의 데이터를 클라우드로 물리적으로 안전하고 효율적으로 이동하기 위한 장치
Database: 특정 워크로드에 대한 특화된 서비스로, 인덱스 및 쿼리 등의 기능을 제공