본문 바로가기

AWS296

SageMaker 안녕하세요 이번 시간에는 AWS에서 제공한는 AI/ML 서비스인 SageMaker에 대해 알아보려고 합니다람쥐. 그럼 우선 Machine Learning이 어떤 방식으로 이루어 지는지를 알아야 각 단계별 어떤 서비스들이 SageMaker에 구성되어있는지 알겠죠랑말? 기계학습은 크게 학습을 하는 단계와 예측을 하는 단계로 이루어저 있습니다. 즉 이미 Input과 Output 즉 정답지를 통해서 학습을 시키고 이를 통해 만들어진 Trained Model을 통해 새로운 Input에 대해 결과를 예측하는 것이 Machine Learning 입니다. 보통 AWS로 SageMaker를 구축할 경우 Datalake도 구축을 하여 데이터를 수집하고 저장하는 단계도 추가되기도 합니다. 하지만 이번에는 SageMaker에.. 2022. 11. 28.
AWS FIS 안녕하세요. BTC_베짱이팀 입니다. 이번주 소개할 AWS 서비스는 "AWS FIS (Fault Injection Simulator)" 입니다. AWS Fault Injection Simulator(AWS FIS) 는 오류 주입 실험을 수행할 수 있는 관리형 서비스입니다. 개념 AWS FIS를 사용하려면 AWS 리소스에 대한 실험을 실행하여 결함 조건에서 애플리케이션 또는 시스템이 어떻게 작동하는지에 대한 이론을 테스트합니다. 실험을 실행하려면 먼저 실험 템플릿을 만듭니다. 실험 템플릿은 실험의 청사진입니다. 여기에는 실험에 대한 작업, 대상 및 중지 조건이 포함됩니다. 실험 템플릿을 만든 후 이를 사용하여 실험을 실행할 수 있습니다. 실험이 실행되는 동안 진행 상황을 추적하고 상태를 볼 수 있습니다. .. 2022. 11. 28.
[AWS] S3실습 베하 ~~ 독감이 유행하네요 다들 독감 조심하세요 ! 오늘은 S3 에 대하여 알아보겠습니다. AWS S3(Simple Storage Service)란? Simple Storage Service의 약자로 파일 서버의 역할을 하는 서비스다. 일반적인 파일서버는 트래픽이 증가함에 따라서 장비를 증설하는 작업을 해야 하는데 S3는 이와 같은 것을 대행한다. 트래픽에 따른 시스템적인 문제는 걱정할 필요가 없어진다. 또 파일에 대한 접근 권한을 지정 할 수 있어서 서비스를 호스팅 용도로 사용하는 것을 방지 할 수 있다. 아래는 S3의 주요한 기능적인 특성들이다. AWS S3(Simple Storage Service의 특징 많은 사용자가 접속을 해도 이를 감당하기 위해서 시스템적인 작업을 하지 않아도 된다. 저장할 .. 2022. 11. 24.
[AWS] S3 / EBS / EFS 스토리지 서비스 비교 S3 vs EBS vs EFS 스토리지 비교 EBS, EFS, S3 모두 데이터를 저장하는 파일 저장 공간 서비스임에는 같다. 하지만 각각 서비스 특징과 성능에 따라 사용 용도를 분별할 필요가 있다. 데이터 시점에서 보면 EBS는 볼륨 기반이며, S3는 객체 기반, 그리고 EFS는 파일 기반 저장 서비스이다. 이 세 가지 파일 저장 스토리지의 특징을 살펴보는 시간을 간단히 가져보자. EFS (Elastic File Storgae) AWS 클라우드 서비스와 온프레미스 리소스에서 사용할 수 있는 간단하고 확장 가능하며 탄력적인 완전 관리형 탄력적 NFS 파일 시스템 NFSv4(Network File System) 프로토콜 사용 VPC 내 EC2 인스턴스는 직접 액세스 할 수 있음 On-premise 서버는 .. 2022. 11. 22.
[AWS] gp2/gp3 안녕하세요 파바샐도입니다 ♪(´▽｀) 오늘은 쉽게 지나치지만 햇갈리는 EBS GP2와 GP3의 가격비교를 해볼까 합니다! EBS gp2 할당된(프로비저닝된) 용량 크기에 따라 성능이 정해집니다. 그러므로 용량 크기에 비해 throughput이나 IOPS가 과다하면 버스팅(bursting)이 발생합니다. 그리고 bursting credit이 소진되면 성능이 저하됩니다. EBS gp3 gp3 는 2020년 12월 경에 전 리전을 대상으로 배포되었습니다. 타입의 장점은 기존 gp2 의 스펙 범위에서, 볼륨의 사이즈와 관계 없이 볼륨의 성능을 조정할 수 있다는 점입니다.심지어 가격은 기존에 비슷한 역할을 하는 io 시리즈에 비교하는 수준이 아닌, gp2 보다도 더 저렴한 금액으로 발표되었습니다. 역시 또 함정은.. 2022. 11. 22.
AWS Security Token Service(AWS STS) 안녕하세요. BTC_베짱이팀 입니다. 오늘 소개드릴 AWS 서비스는 "AWS Security Token Service(AWS STS)" 입니다. AWS Security Token Service(AWS STS)를 사용하면 AWS 리소스에 대한 액세스를 제어할 수 있는 임시 보안 자격 증명을 생성하여 신뢰받는 사용자에게 제공할 수 있습니다. 임시 보안 자격 증명은 다음과 같은 차이점을 제외하고는 IAM 사용자가 사용할 수 있는 장기 액세스 키 자격 증명과 거의 동일한 효력을 지닙니다. 작동원리 IAM의 임시 보안 자격 증명 AWS Security Token Service(AWS STS)를 사용하면 AWS 리소스에 대한 액세스를 제어할 수 있는 임시 보안 자격 증명을 생성하여 신뢰받는 사용자에게 제공할 수 있.. 2022. 11. 21.
[AWS] 스토리지(STORAGE) 베하~~ 수지타산 입니다 이제 슬슬 두꺼운 외투를 꺼내는게 좋을 듯한 날씨입니다 오늘은 저번 시간에 이어서 스토리지에 대해 공부할게요 팔로팔로팔로미 스토리지(Storage)란? 컴퓨터에 데이터를 저장하는 저장소의 역할을 수행합니다 컴퓨터의 하드디스크와 동일한 역할을 수행하는 부품이며, 스토리지를 직접 서버에 연결 할 수도 있습니다 대용량의 데이터를 저장하기 위해 별도의 스토리지용 네트워크를 구성할 수 있음. 스토리지에는 DAS / NAS / SAN (다스 / 나스 / 산스)가 있고, 이는 스토리지의 종류로 연결방식에 차이가 있습니다. 그렇다면, 어떤 차이가 있는지 알아보겠습니다 1) DAS (like외장하드) Direct Attachted Storage PC나 서버에 다이렉트로 꽂아서(usb처럼) 사용하.. 2022. 11. 18.
[AWS] 스토리지 베하 ~~~~~~~~~ 수 지 타 산 입니다. 식사 맛있게 하셨나요~? 저는 칼국수와 꼬마 김밥을 먹었습니다. 힘내서 해보자구요 ! 오늘은 AWS의 스토리지 종류에 대하여 알아볼게요 팔로팔로팔로미 Storage EBS ☁️ Elastic Block Store 대규모로 처리량과 트랜잭선 집약적 워크로드 모두를 지원하기 위해 EC2에서 사용하도록 설계된 사용하기 쉬운 고성능 블록 스토리지 서비스 1️⃣ SSD 지원 스토리지 트랜잭션 워크로드 IOPS 집약적 데이터베이스 워크로드 부트 볼륨 및 높은 IOPS가 필요한 워크로드 2️⃣ HDD 지원 스토리지 처리량 워크로드 빅 데이터 워크로드 큰 I/O 크기 및 순차적 I/O 패턴 설계 ✔️ POINT EC2 = 인스턴스가 활성화 되어 있는 동안만 저장된 데이터 .. 2022. 11. 14.

티스토리툴바