Cloud/Google Cloud Study Jam
Visualize Real Time Geospatial Data with Google Data Studio
사향낭
2022. 6. 21. 02:06
Visualize Real Time Geospatial Data with Google Data Studio | Google Cloud Skills Boost
Use Google Dataflow to process real-time streaming data from a real-time real world historical data set, storing the results in Google BigQuery and then using Google Data Studio to visualize real-time geospatial data.
www.cloudskillsboost.google
이번 lab에서는 real-time streaming 데이터들을 Google Dataflow를 이용하여 처리하여 BigQuery에 결과를 담아 Google Data Studio를 위한 데이터를 모을 것이다.
VM에서 repository 하나를 clone하고 필요한 Python package들을 설치한다.
그리고 Google Pub/Sub topic을 만들어 real-time으로 데이터가 실시간으로 전송하는 simulation을 한다.
그리고 한쪽에서는 실시간으로 전송되는 데이터를 (Dataflow를 이용해) 받아 BigQuery에 넣는다.
BigQuery에서 query문으로 전송된 데이터를 확인할 수 있다.
그리고 그렇게 모은 데이터로 view를 만들어 Google Data Studio에서 이쁜 지도를 그릴 수 있다.
