본문 바로가기

google cloud platform3

[Google Cloud Platform] GCP 빅데이터와 머신러닝(3) Google Cloud 빅데이터 플랫폼 - 실시간 데이터 - Data Pipeline 안녕하세요. BTC GCP팀 소속 손지수, 박은혜입니다. 코로나가 또다시 기승을 부리는 요즘이네요. 건강, 체력 모두 조심 또 조심합시다! 지난 2주간 클라우드 상에서 '빅데이터' 와 '머신러닝' 서비스가 어떻게 활용될 수 있는지, '온프레미스' 에서 빅데이터 플랫폼 구축할 때, 그리고 'GCP의 서비스 Dataproc' 을 사용했을 때 작업 과정·결과를 살펴보며 더 효율적인 구축 과정을 알 수 있었습니다. 오늘의 글은 실시간 데이터와 데이터 파이프라인에 대해서 다뤄보려고 합니다. 잘 부탁드립니다.^^ MODULE 04 빅데이터와 머신러닝 Google Cloud 빅데이터 플랫폼 실시간 데이터 Hadoop과 같은 경우 일.. 2022. 7. 27.
[Google Cloud Platform] GCP 스토리지, 컨테이너 스토리지, 컨테이너 - 컨테이너 - 쿠버네티스 안녕하세요. BTC GCP팀 소속 손지수, 박은혜입니다. 요즘 날씨가 너무 더워서 지치기 쉬운데, 여유를 가지고 시원한 하루 보내시길 바랍니다. 앞서 GCP의 스토리지 옵션에 대해서 알아보았습니다. 이번주는 컨테이너와 쿠버네티스 개념을 간략하게 소개해보려고 합니다. 그럼 오늘도 잘 부탁드립니다.! MODULE 04 스토리지, 컨테이너 이 글을 읽고 계시는 분들 중 대부분이 '서버관리', '컨테이너' 사용 경험이 없을 것으로 예상되고, 컨테이너, 쿠버네티스와 같은 개념을 낯설게 느끼실 것 같습니다. 기술적으로도 쉽지 않지만, 실제로 사용했을 때 굉장히 효율적인 기술들입니다. 그래서 이번 목표는 전체를 다 이해하는 것이 아닌 컨테이너와 쿠버네티스가 무엇인지를 알.. 2022. 7. 4.
[Google Cloud Platform] GCP 스토리지, 컨테이너 - STRUCTURED DATA(1) 스토리지, 컨테이너 - GCP의 스토리지 : STRUCTURED DATA (1) - BIgQuery 안녕하세요. BTC GCP팀 소속 손지수, 박은혜입니다. 벌써 6월이 시작됐습니다. 이번 달도 웃음 팡팡 가득한 날이길 바랍니다! 지난 2주간 GCP의 스토리지와 컨테이너 그리고 다양한 스토리지 옵션을 살펴봤습니다. GCP에서는 다양한 스토리지 및 데이터베이스 서비스를 제공하고 있고, 해당 서비스와 관련된 제품은 크게 UNSTRUCTURED DATA: 비정형 데이터를 저장하기 위한 스토리지와 STRUCTURED DATA : 정형 데이터를 저장하기 위한 스토리지로 나눌 수 있었습니다. 저번 포스팅에서는 비정형 데이터와 그 데이터가 저장되는 오브젝트 스토리지, Cloud Storage를 소개해드렸습니다. 이번.. 2022. 6. 7.