본문 바로가기

quicksight2

[AWS] 실시간 데이터 파이프라인 구축(3) 탑신병자 듀오 팀 티모입니다. AWS 기반 실시간 데이터 파이프라인을 이어서 구축해보겠습니다. 실습 과정입니다. Kinesis Data Streams : 지속적으로 생산되는 실시간 IoT 로그들을 Kinesis Data Streams 내 Buffer Storage에 수집합니다. 수집된 데이터들은 Shard에 저장되며 Consumer들은 Shard에 저장된 데이터들을 가져가 사용합니다. Glue Streaming : ETL 서비스인 AWS Glue을 통해 Kinesis Data Streams에 쌓이는 실시간 데이터를 처리합니다. 처리가 완료된 데이터들은 Amazon S3에 저장합니다. Glue Data Catalog : 실시간 유입되는 데이터들을 처리하기 위해 데이터의 스키마 형식을 Glue Data Ca.. 2023. 10. 16.
[AWS] QuickSight & Query mode 베하~! 안녕하세요 여러분! BTC 블랙아웃입니다. 한 주 잘 보내셨나요? 저희는 최근 AWS Quicksight에 대해 알아보던 중, Query mode에 선택할 수 있다는 것을 알게 되었는데요! 그래서 오늘은 이 Quicksight라는 것이 어떤 서비스인지, 그 중에서 query mode 라는 것이 무엇이고 옵션에서 어떤 차이가 있는지 알아보도록 하겠습니다! 먼저 QuickSight에 대해 알아보겠습니다. 1. AWS Quicksight란? Amazon QuickSight는 클라우드의 데이터에 연결하고 다양한 소스의 데이터를 결합하여 이해하기 쉽고 직관적인 통찰력을 제공하는 데 도움을 주는 BI 서비스를 의미합니다. QuickSight는 AWS 데이터, 타사 데이터, 빅 데이터, 스프레드시트 데이터,.. 2023. 6. 1.