AWS SAP : 스토리지 솔루션

스토리지 솔루션

Req)

솔루션즈 아키텍트가 스토리지 계층 설계를 DW 애플리케이션용으로 진행하고 있다.

데이터 파일은 크지만, 정적형태로 메타데이터가 파일의 시작 부분에 있어 사이즈와 파일 인덱스 위치를 표현합니다.

데이터 파일은 EC2인스턴스에서 읽혀지며 EC2는 인덱스 사이즈, 인덱스 위치, 다른 카테고리 정보를 DB에 있는 데이터파일에 대해 저장하고 있습니다. 

DB는 Amazon EDR에 의해 그룹파일이 되어 더 깊은 분석에 사용됩니다. 

무엇이 가장 비용효과적인 HA스토리지 솔루션이 될까요?

 

So) S3, Range GET, index

DW	S3
메타 데이터	Range GET
관련 데이터만 분석	index