Data Engineering with Google Cloud 日本語版 Professional Certificate

この 2 週間の速習オンデマンド コースでは、Google Cloud Platform（GCP）のビッグデータ機能と機械学習機能を紹介します。Google Cloud Platform の概要を簡単に説明した後、データ処理機能について詳しく説明します。

このコースを修了すると、受講者は次のことができるようになります。 • Google Cloud Platform のビッグデータと機械学習に関係する主要プロダクトの目的と価値を理解する • Cloud SQL と Cloud Dataproc を使用して既存の MySQL と Hadoop、Pig、Spark、Hive のワークロードを Google Cloud Platform に移行する • BigQuery と Cloud Datalab を使用してインタラクティブなデータ解析を実行する • Cloud SQL、Bigtable、Datastore のいずれかを選択する • TensorFlow を使用してニューラル ネットワークをトレーニングし、利用する • Google Cloud Platform のさまざまなデータ処理プロダクトについて理解し、選択する このコースは、次の 1 つ以上の分野で 1 年程度の経験がある方を対象としています。 • SQL などの一般的なクエリ言語 • 抽出、変換、読み込みの操作 • データ モデリング • 機械学習または統計 • Python でのプログラミング Google アカウントに関する注意点: • 現在 Google サービスは中国では使用できません。

すべてのデータ パイプラインには、データレイクとデータ ウェアハウスという 2 つの主要コンポーネントがあります。このコースでは、それぞれのストレージのユースケースに焦点を当て、Google Cloud Platform で利用可能なデータレイクおよびデータ ウェアハウスのソリューションを技術的に詳しく説明します。 また、データ エンジニアの役割や、適切なデータ パイプラインが事業運営にもたらすメリットについて述べ、クラウド環境でデータ エンジニアリングを行うべき理由を説明します。受講者は Qwiklabs を使用して、Google Cloud Platform のデータレイクとデータ ウェアハウスを実際に使ってみることができます。

データ パイプラインは通常、Extract-Load（抽出、読み込み）、Extract-Load-Transform（抽出、読み込み、変換）、Extract-Transform-Load（抽出、変換、読み込み）のいずれかの方式に分類されます。このコースでは、どの方式をどのような場合にバッチデータに対して使用すべきかを説明します。また、Google Cloud Platform 上のデータ変換技術（BigQuery など）、Cloud Dataproc での Spark の実行、Cloud Data Fusion でのパイプライン グラフ、Cloud Dataflow によるサーバーレスのデータ処理についても取り上げます。Qwiklabs を使用して、Google Cloud Platform でデータ パイプライン コンポーネントを実際に構築できます。

* 注: このコースは、本専門講座の旧バージョンの内容を更新して新たに作成したものです。

ストリーミングの活用によって事業運営に関する指標をリアルタイムで入手できるようになり、企業ではますますストリーミング データの処理が行われるようになっています。このコースでは、Google Cloud Platform でストリーミング データ パイプラインを構築する方法について説明します。受信したストリーミング データを処理するための Cloud Pub/Sub についても解説します。また、Cloud Dataflow を使用してストリーミング データに集計と変換を適用する方法と、処理済みレコードを BigQuery やCloud Bigtable に保存して分析する方法も取り上げます。Qwiklabs を使用して、Google Cloud Platform でストリーミング データ パイプライン コンポーネントを実際に構築することができます。