[AWS] Elastic File System 개념 및 실습

해당 포스팅은 AWS 강의실(https://www.youtube.com/@AWSClassroom)를 보고 공부한 내용을 정리한 블로그입니다.

아직 많이 부족하고 배울게 너무나도 많습니다. 틀린내용이 있으면 언제나 가감없이 말씀해주시면 감사하겠습니다😁

네 자신의 불행을 생각하지 않게 되는 가장 좋은 방법은 일에 몰두하는 것이다.
Ludwig van Beethoven

Elastic File System(EFS)

---

Amazon EFS(Amazon Elastic File System)은 AWS 클라우드 서비스와 온프레미스 리소스에서 사용할 수 있는 간단하고 확장 가능하며 탄력적인 완전관리형 NFS 파일 시스템을 제공합니다. 이 제품은 애플리케이션을 중단하지 않고 온디맨드 방식으로 페타바이트 규모까지 확장하도록 구촉되어 파일을 추가하고 제거할 때 자동으로 확장하고 축소하며 확장 규모에 맞게 용량을 프로비저닝 및 관리할 필요가 없습니다.
-AWS-

Elastic File System

• 세션 관리, 소스코드 관리, 빅데이터, ML 분산처리 시 필요
• NFS 기반 공유 스토리지 서비스(NFSv4)
  • 따로 용량을 지정할 필요없이 사용한만큼 용량이 증가 <-> EBS는 미리 크기를 지정해야함.
• 페타 바이트 단위까지 확장 가능
• 몇천개의 동시 접속 유지 가능
• 데이터는 여러 가용면적에 나누어 분산 저장.
• 쓰기 후 읽기(Read After Write) 일관성
• private Service: AWS 외부에서 접속 불가능
  • AWS 외부에서 접속하기 위해서는 VPN 혹은 Direct Connect 등으로 별도로 VPC와 연결 필요
• 각 가용영역에 Mount Target을 두고 각각의 가용영역에 해당 Mount Target으로 접근
• linux만 사용 가능
• 하나의 서브넷은 하나의 가용영역태에 존재

구조

퍼포먼스 모드

• General Purpose: 가장 보편적인 모드, 거의 대부분의 경우 사용 권장.
• Max IO: 매우 높은 IOPS가 필요한 경우
  • 빅데이터, 미디어 처리

Throughput 모드

• bursting throughput: 낮은 throughput일 때 크레딧을 모아 높은 throughput일 때 사용
  • EC2 T 타입과 비슷한 개념
• Provisioned Throughput: 미리지정한 만큼의 throughput을 확보한 후 사용

스토리지 클래스

• EFS Standard: 3개 이상의 가용영역에 보관
• EFS Standard - IA: 3개 이상의 가용영역에 보관, 조금 저렴한 비용 대신 데이터를 가져올 때 비용 발생
• EFS One Zone: 하나의 가용영역에 보관 → 저장된 가용영역의 상황에 영향을 받을 수 있음.
  • 별로 중요하지 않은 데이터 등을 보관
• EFS One Zone - IA: 저장된 가용영역의 상황에 영향을 받을 수 있음. 데이터를 가져올 때 비용발생(가장 저렴)

FSx

• FSx for window File Server
  • EFS의 윈도우즈 버전
  • SMB 프로토콜 활용
  • Microsoft Active Directory와 통합 드의 관리 기능 사용 가능
  • Linux, MacOS등의 다른 OS에서도 활용 가능
• FSx for Lustre
  • 리눅스를 위한 고성능 병렬 스토리지 시스템
  • 주로 머신러닝, 빅데이터등의 고성능 컴퓨팅에 사용
  • AWS 밖의 온프레미스에서 액세스 가능

실습

---

1. Amazon EFS를 위한 보안 그룹 생성

  1. 인바운드 규칙 => 모든 트래픽

보안 그룹 생성

2. Amazon EFS 생성

EFS

3. EC2 인스턴스 3개 프로비전

  1. 유저 데이터

    1. 생성한 EFS 마운트

    2. 웹 서버 생성/실행

각 가용영역의 마운트 포인트 생성

4. 각 웹 서버에서 스토리지 공유하는 것을 확인

  1. 관리 후 데모로 변경

5. 리소스 정리