본문 바로가기

Cloud/Google Cloud Study Jam35

Reinforcement Learning: Qwik Start 강화 학습: Qwik Start | Google Cloud Skills Boost 이 실습에서는 강화 학습의 기본 개념을 학습하고 실습해 봅니다. www.cloudskillsboost.google 이번 lab에서는 OpenAI Gym이 제공하는 샘플을 이용해 RL의 기본에 대해 배워볼 것이다. RL을 간단히 설명하자면 다음과 같다. 어떠한 environment가 있고 그러한 environment 속에서 일어날 수 있는 어떠한 state가 주어졌을 때, reward를 최대로 만들기 위한 agent가 취해야 할 최적의 action을 학습하는 ML의 일종이다. RL 기법 중 구현하기 쉽고 강력한 최신의 방법으로 Deep Q-Network(DQN)과 Deep Deterministic Policy Gradient.. 2022. 6. 20.
Dataproc: Qwik Start - Command Line Dataproc: Qwik Start - 명령줄 | Google Cloud Skills Boost 이 실습에서는 Google Cloud Dataproc 클러스터를 만들고, 클러스터에서 간단한 Apache Spark 작업을 실행한 다음 작업자 수를 수정하는 방법을 보여줍니다. 이 모든 작업은 gcloud 명령줄에서 실행됩니다. www.cloudskillsboost.google Cloud Dataproc은 Apache Spark와 Apache Hadoop cluster를 돌리는 것을 더 편리하고 빠르게 등등 (아무튼 더 좋음) 사용할 수 있도록 하는 Cloud Service이다. cost-efficient 하며 더 빠르고 간단하게 사용할 수 있다고 하기 때문에 큰 용량의 data processing이 필요할.. 2022. 6. 17.
Dataflow: Qwik Start - Python Dataflow: Qwik Start - Python | Google Cloud Skills Boost 이 실습에서는 Python 개발 환경을 설정하고, Python용 Cloud Dataflow SDK를 가져오고, Google Cloud Platform Console을 사용하여 예시 파이프라인을 실행합니다. www.cloudskillsboost.google 이번 lab에서는 Python 개발 환경을 조성하고, Cloud Dataflow SCK를 가져와 Cloud Console을 이용하여 예시의 pipeline을 돌려볼 것이다. Cloud Storage bucket 하나를 생성한다. python 3.7이 설치되어 있는 Docker container를 실행시킨 후 Apache Beam을 다운받는다. 예시로 .. 2022. 6. 16.
Dataprep: Qwik Start Dataprep: Qwik Start | Google Cloud Skills Boost Google Cloud Dataprep은 데이터를 시각적으로 탐색하고 정리하여 분석할 수 있도록 준비하는 지능형 데이터 서비스입니다. 짧은 동영상 Dataprep: Qwik Start - Qwiklabs Preview www.cloudskillsboost.google Cloud Storage Bucket 만들기 Navigation menu -> Cloud Storage -> Browser Create bucket globally unique 하게 이름을 가지도록 설정해주고 CREATE Cloud Dataprep 시작하기 Navigation menu -> Dataprep Google Dataprep Terms of Se.. 2022. 6. 3.