본문 바로가기
CSP (Cloud Service Provider)/NAVER Cloud

[Naver Cloud Platform] RUA, ELSA, Cloud Hadoop, Elasticsearch, Cloud Data-streaming 소개 (2)

by BTC_서 2022. 12. 20.

기존 Elasticsearch Service가 Search Engine Service로 이름이 변경

 

안녕하세요. 대머리독수리팀 입니다.

오늘은 NCP의 RUA, ELSA, Cloud Hadoop, Elasticsearch, Cloud Data-streaming 저번 포스팅에 이어서 알아보겠습니다.

 

 

네이버 클라우드 플랫폼 Cloud Hadoop 핵심 기능 - Object Storage 활용


 

  • 분석에 필요한 성능만큼 컴퓨팅 노드 확장/축소 가능
  • 용량 걱정 없이 저장할 수 있는 Object Storage 사용

 

네이버 클라우드 플랫폼 Cloud Hadoop - 다양한 프레임 워크 지원


  • Core Hadoop, Hbase, Spark 등의 오픈 소스 프레임워크 제공

(현재 빨간박스를 제외한 프레임워크를 지원하고 있음.)

 

Cloud Hadoop 


* 상세 기능

  • 쉽게 간단하게 클러스터 생성- Hadoop, Hbase, Spark, Hive, Presto 등의 오픈 소스 프레임워크 설치, 구성이 최적화된 클러스터가 생성되어 사용자는 바로 분석에 필요한 작업을 수행 가능
  • 다양한 유형의 서버 타입 제공- 분석에 필요한 성능에 맞춰서 다양한 서버를 선택하여, 빠르게 대량의 데이터 분석 가능
  • 다양한 유형의 스토리지 제공- 기본 저장소(HDFS)로 Block Storage를 지원- Object Storage와도 연동이 가능
  • 고 가용성 확보 - 클러스터 생성시 필수로 2대의 마스터 노드를 제공하여 이중화 구성하고 고가용성 보장
  • 손쉬운 컴퓨팅 노드 확장 - 클릭 몇 번 만으로 클러스터 작업자 노드 수를 증가하거나, 축소가 가능
  • 외부 접속을 위한 Edge Node 제공 - 외부 접속을 위한 Edge Node를 분리하여 자원의 효율성가 보안성을 제공

 

Hadoop 구성 아키텍처 


- 아키텍쳐

 

Hadoop Cluster


- Core Hadoop : HDFS, YARN, HIVE HUE, RANGER

- Presto : Presto, HDFS, YARN, HUE, Zepplin Notebook, Ranger

- Hbase : HDFS, YARN, HIVE, Hbase, Zookeeper, RANGER

- Spark : HDFS, YARN, HIVE, HUE, Zepplin Notebook, RANGER

 

다음에 이어서 알아보겠습니다!

댓글