When will I receive my Course Certificate?

If you complete the course successfully, your electronic Course Certificate will be added to your Accomplishments page - from there, you can print your Course Certificate or add it to your LinkedIn profile.

Why can’t I audit this course?

This course is currently available only to learners who have paid or received financial aid, when available.

Is financial aid available?

Yes. In select learning programs, you can apply for financial aid or a scholarship if you can’t afford the enrollment fee. If fin aid or scholarship is available for your learning program selection, you’ll find a link to apply on the description page.

Google Cloud에서 일괄 데이터 파이프라인 빌드하기

Ce cours n'est pas disponible en Français (France)

Nous sommes actuellement en train de le traduire dans plus de langues.

Google Cloud에서 일괄 데이터 파이프라인 빌드하기

Instructeur : Google Cloud Training

Inclus avec

4 modules

Obtenez un aperçu d'un sujet et apprenez les principes fondamentaux.

niveau Intermédiaire

Certaines connaissances prérequises

9 heures à compléter

Planning flexible

Apprenez à votre propre rythme

4 modules

Obtenez un aperçu d'un sujet et apprenez les principes fondamentaux.

niveau Intermédiaire

Certaines connaissances prérequises

9 heures à compléter

Planning flexible

Apprenez à votre propre rythme

Ce que vous apprendrez

일괄 데이터 파이프라인이 비즈니스 사용 사례에 적합한 선택인지 판단합니다.
대용량 수집 및 변환을 위한 확장 가능한 일괄 데이터 파이프라인을 설계하고 빌드합니다.
일괄 파이프라인 내에서 데이터 품질 관리를 구현하여 데이터 무결성을 보장합니다.
일괄 데이터 파이프라인 워크플로를 조정, 관리, 모니터링하면서 로깅 및 모니터링 도구를 사용한 오류 처리 및 모니터링 가능성을 구현합니다.

Compétences que vous acquerrez

Catégorie : System Monitoring
Catégorie : Serverless Computing
Catégorie : Data Transformation
Catégorie : Data Validation
Catégorie : Cloud Services
Catégorie : Google Cloud Platform
Catégorie : Performance Tuning
Catégorie : Data Quality
Catégorie : Dataflow
Catégorie : Data Cleansing
Catégorie : Data Management
Catégorie : Data Warehousing
Catégorie : Extract, Transform, Load
Catégorie : Data Pipelines
Catégorie : Data Processing

Outils que vous découvrirez

Catégorie : Apache Spark

Détails à connaître

Certificat partageable

Ajouter à votre profil LinkedIn

Évaluations

5 devoirs

Enseigné en Coréen

Découvrez comment les employés des entreprises prestigieuses maîtrisent des compétences recherchées

En savoir plus sur Coursera pour les affaires

logos de Petrobras, TATA, Danone, Capgemini, P&G et L'Oreal

Il y a 4 modules dans ce cours

이 중급 과정에서는 Google Cloud에서 강력한 일괄 데이터 파이프라인을 설계, 빌드, 최적화하는 방법을 알아봅니다. 기본적인 데이터 처리를 넘어, 시의적절한 비즈니스 인텔리전스와 중요한 보고에 필수적인 대규모 데이터 변환과 효율적인 워크플로 조정에 대해 살펴봅니다.

Apache Beam용 Dataflow와 Apache Spark용 서버리스(Dataproc Serverless)를 사용하여 구현을 실습하고, 파이프라인 안정성과 운영 우수성을 보장하기 위해 데이터 품질, 모니터링, 알림에 대한 중요한 고려사항을 다룹니다. 데이터 웨어하우징, ETL/ELT, SQL, Python, Google Cloud 개념에 대한 기본적인 지식이 있으면 좋습니다.

일괄 데이터 파이프라인을 개발하고 유지관리하는 데 있어 데이터 엔지니어의 중요한 역할을 배우고, 핵심 구성요소와 수명 주기를 이해하며, 일괄 데이터 처리의 일반적인 과제를 분석합니다. 또한 이러한 과제를 해결하는 데 도움이 되는 주요 Google Cloud 서비스를 파악합니다.

Inclus

1 devoir2 plugins

대용량 데이터 수집 및 변환을 위해 확장 가능한 일괄 데이터 파이프라인을 설계합니다. 또한 높은 처리량과 비용 효율성을 위해 다양한 리소스 관리 및 성능 조정 기법을 사용하여 일괄 작업을 최적화합니다.

Inclus

1 devoir2 éléments d'application6 plugins

1 devoirTotal 8 minutes

모듈 2 퀴즈: 설계 및 변환8 minutes

2 éléments d'applicationTotal 105 minutes

실습: Apache Spark용 서버리스로 간단한 일괄 데이터 파이프라인 빌드하기45 minutes
실습: Dataflow 작업 빌더 UI로 간단한 일괄 데이터 파이프라인 빌드하기60 minutes

6 pluginsTotal 60 minutes

일괄 파이프라인 설계10 minutes
대규모 데이터 변환10 minutes
Dataflow 및 Apache Spark용 서버리스10 minutes
데이터 연결 및 조정10 minutes
Apache Spark 파이프라인 실행10 minutes
일괄 파이프라인 성능 최적화10 minutes

일괄 파이프라인 내에서 데이터 품질을 보장하기 위해 데이터 검증 규칙과 정리 로직을 개발합니다. 또한 대규모 데이터 세트에서 스키마 변경을 관리하고 데이터 중복 삭제를 수행하기 위한 전략을 구현합니다.

Inclus

1 devoir1 élément d'application6 plugins

1 devoirTotal 8 minutes

모듈 3 퀴즈: 데이터 검증 및 스키마 변경8 minutes

1 élément d'applicationTotal 60 minutes

실습: Apache Spark용 서버리스를 사용하여 일괄 파이프라인에서 데이터 품질 검증하기60 minutes

6 pluginsTotal 60 minutes

일괄 데이터 검증 및 정리10 minutes
오류 로깅 및 분석10 minutes
일괄 파이프라인의 스키마 변경10 minutes
데이터 무결성 및 중복10 minutes
Apache Spark용 서버리스를 사용한 중복 삭제10 minutes
Dataflow를 사용한 중복 삭제10 minutes

효율적인 일정 예약 및 계보 추적을 위해 복잡한 일괄 데이터 파이프라인 워크플로를 조정합니다. 또한 일괄 데이터 파이프라인에 대하여 강력한 오류 처리, 모니터링, 모니터링 가능성을 구현합니다.

Inclus

2 devoirs1 élément d'application6 plugins

2 devoirsTotal 16 minutes

모듈 4 퀴즈: 조정 및 DAG8 minutes
모듈 4 퀴즈: 모니터링 가능성8 minutes

1 élément d'applicationTotal 90 minutes

실습: Cloud Data Fusion에서 일괄 파이프라인 빌드하기90 minutes

6 pluginsTotal 60 minutes

일괄 처리를 위한 조정10 minutes
Cloud Composer10 minutes
통합 모니터링 가능성10 minutes
알림 및 문제 해결10 minutes
시각적 파이프라인 관리10 minutes
마무리: 과정 요약10 minutes

Instructeur

Google Cloud Training

Google Cloud

2 171 Cours4 177 269 apprenants

Offert par

Google Cloud

Pour quelles raisons les étudiants sur Coursera nous choisissent-ils pour leur carrière ?

Felipe M.

Étudiant(e) depuis 2018

’Pouvoir suivre des cours à mon rythme à été une expérience extraordinaire. Je peux apprendre chaque fois que mon emploi du temps me le permet et en fonction de mon humeur.’

Jennifer J.

Étudiant(e) depuis 2020

’J'ai directement appliqué les concepts et les compétences que j'ai appris de mes cours à un nouveau projet passionnant au travail.’

Larry W.

Étudiant(e) depuis 2021

’Lorsque j'ai besoin de cours sur des sujets que mon université ne propose pas, Coursera est l'un des meilleurs endroits où se rendre.’

Chaitanya A.

’Apprendre, ce n'est pas seulement s'améliorer dans son travail : c'est bien plus que cela. Coursera me permet d'apprendre sans limites.’

Ouvrez de nouvelles portes avec Coursera Plus

Accès illimité à 10,000+ cours de niveau international, projets pratiques et programmes de certification prêts à l'emploi - tous inclus dans votre abonnement.

Faites progresser votre carrière avec un diplôme en ligne

Obtenez un diplôme auprès d’universités de renommée mondiale - 100 % en ligne

Découvrir les diplômes

Rejoignez plus de 3 400 entreprises mondiales qui ont choisi Coursera pour les affaires

Améliorez les compétences de vos employés pour exceller dans l’économie numérique

Foire Aux Questions

Yes, you can preview the first video and view the syllabus before you enroll. You must purchase the course to access content not included in the preview.

If you decide to enroll in the course before the session start date, you will have access to all of the lecture videos and readings for the course. You’ll be able to submit assignments once the session starts.

Once you enroll and your session begins, you will have access to all videos and other resources, including reading items and the course discussion forum. You’ll be able to view and submit practice assessments, and complete required graded assignments to earn a grade and a Course Certificate.

Plus de questions

Visitez le Centre d'Aide pour les Étudiants

Aide financière disponible,

Google Cloud에서 일괄 데이터 파이프라인 빌드하기

Ce cours n'est pas disponible en Français (France)

Google Cloud에서 일괄 데이터 파이프라인 빌드하기

Ce que vous apprendrez

Compétences que vous acquerrez

Outils que vous découvrirez

Détails à connaître

Découvrez comment les employés des entreprises prestigieuses maîtrisent des compétences recherchées

Il y a 4 modules dans ce cours

일괄 데이터 파이프라인을 선택해야 하는 경우

Inclus

1 devoirTotal 20 minutes

2 pluginsTotal 25 minutes

일괄 데이터 파이프라인 설계 및 빌드

Inclus

1 devoirTotal 8 minutes

2 éléments d'applicationTotal 105 minutes

6 pluginsTotal 60 minutes

일괄 데이터 파이프라인의 데이터 품질 관리

Inclus

1 devoirTotal 8 minutes

1 élément d'applicationTotal 60 minutes

6 pluginsTotal 60 minutes

일괄 데이터 파이프라인 조정 및 모니터링

Inclus

2 devoirsTotal 16 minutes

1 élément d'applicationTotal 90 minutes

6 pluginsTotal 60 minutes

Instructeur

Offert par

Pour quelles raisons les étudiants sur Coursera nous choisissent-ils pour leur carrière ?

Felipe M.

Jennifer J.

Larry W.

Chaitanya A.

Ouvrez de nouvelles portes avec Coursera Plus

Faites progresser votre carrière avec un diplôme en ligne

Rejoignez plus de 3 400 entreprises mondiales qui ont choisi Coursera pour les affaires

Foire Aux Questions

Plus de questions

Google Cloud에서 일괄 데이터 파이프라인 빌드하기

Ce cours n'est pas disponible en Français (France)

Google Cloud에서 일괄 데이터 파이프라인 빌드하기

Ce que vous apprendrez

Compétences que vous acquerrez

Outils que vous découvrirez

Détails à connaître

Découvrez comment les employés des entreprises prestigieuses maîtrisent des compétences recherchées

Il y a 4 modules dans ce cours

일괄 데이터 파이프라인을 선택해야 하는 경우

Inclus

일괄 데이터 파이프라인 설계 및 빌드

Inclus

일괄 데이터 파이프라인의 데이터 품질 관리

Inclus

일괄 데이터 파이프라인 조정 및 모니터링

Inclus

Instructeur

Offert par

Pour quelles raisons les étudiants sur Coursera nous choisissent-ils pour leur carrière ?

Felipe M.

Jennifer J.

Larry W.

Chaitanya A.

Ouvrez de nouvelles portes avec Coursera Plus

Faites progresser votre carrière avec un diplôme en ligne

Rejoignez plus de 3 400 entreprises mondiales qui ont choisi Coursera pour les affaires

Foire Aux Questions

Can I preview a course before enrolling?

When will I have access to the lectures and assignments?

What will I get when I enroll?

Plus de questions