본문 바로가기

PS1팀19

[Qwiklab] Creating a Data Transformation Pipeline with Cloud Dataprep Data Engineering 과정 (in Qwiklab) Creating a Data Transformation Pipeline with Cloud Dataprep https://www.cloudskillsboost.google/focuses/4415?locale=en&parent=catalog Creating a Data Transformation Pipeline with Cloud Dataprep | Google Cloud Skills Boost Cloud Dataprep by Trifacta is an intelligent data service for visually exploring, cleaning, and preparing structured and unstructured data for .. 2022. 4. 22.
GCP BigQuery BigQuery ​ ​ 첫번째 BigQuery 소개 ​ 몇 초만에 대규모 데이터를 쿼리할 수 있는 관계형 클라우드 데이터베이스 SQL을 사용하므로 대용량 데이터셋을 탐색하기가 쉽고 빠름 쿼리를 실행하고 원했던 결과가 아니라면 약간 수정한 후 다시 실행할 수 있습니다. 많은 행(row)을 스캐닝하고 필터링하여 의미 있는 요약 데이터를 집계하는 분석 도구로 사용할 때 가장 강력 기존의 관계형 데이터베이스 ​ ​ 빅데이터 처리에 있어서 기존 시스템의 한계 ​ 아래와 같은 과정을 통해 기존의 도구로 빅데이터를 처리할 수 있습니다. ​ ① MySQL에서 특정 쿼리 실행속도를 높이기 위해 성능 관련 매개변수를 조정 ② 읽기 복제본을 설정 ③ Netezza와 같은 데이터웨어하우스를 이용해서 빅데이터를 처리 ​ 그러나.. 2022. 4. 15.
데이터 스튜디오 첫번째. 데이터 스튜디오 (1) 데이터 스튜디오 데이터 시각화 도구 BigQuery 데이터를 이해하고 양방향 방식으로 데이터를 분석하는 데 도움을 줌 양방향 대시보드와 한눈에 이해되는 보고서로 데이터를 심층 분석하여 더욱 현명한 비즈니스 결정을 내릴 수 있도록 함 사용이 쉬움 무료로 이용 가능 데이터 스튜디오 사이트 Google Data Portal Overview Connect Easily access a wide variety of data. Data Portal’s built-in and partner connectors makes it possible to connect to virtually any kind of data. See what data you can access Visualize T.. 2022. 4. 8.