Johns Hopkins University
YARN MapReduce-Architektur und fortgeschrittene Programmierung
Johns Hopkins University

YARN MapReduce-Architektur und fortgeschrittene Programmierung

Bei Coursera Plus enthalten

Verschaffen Sie sich einen Einblick in ein Thema und lernen Sie die Grundlagen.
Stufe Mittel

Empfohlene Erfahrung

2 Wochen zu vervollständigen
unter 10 Stunden pro Woche
Flexibler Zeitplan
In Ihrem eigenen Lerntempo lernen
Verschaffen Sie sich einen Einblick in ein Thema und lernen Sie die Grundlagen.
Stufe Mittel

Empfohlene Erfahrung

2 Wochen zu vervollständigen
unter 10 Stunden pro Woche
Flexibler Zeitplan
In Ihrem eigenen Lerntempo lernen

Was Sie lernen werden

  • Lernen Sie die Grundlagen von YARN- und MapReduce-Architekturen kennen und erfahren Sie, wie sie zusammenarbeiten, um große Datenmengen effizient zu verarbeiten.

  • Verstehen und Implementieren von Mapper- und Reducer-Parallelität in MapReduce-Aufträgen zur Verbesserung der Effizienz und Skalierbarkeit der Datenverarbeitung.

  • Anwendung von Optimierungstechniken wie Kombinierer, Partitionierer und Komprimierung, um die Leistung und E/A-Operationen von MapReduce-Aufträgen zu verbessern.

  • Erforschen Sie fortgeschrittene Konzepte wie Multithreading, spekulative Ausführung, Eingabe-/Ausgabeformate und wie Sie gängige MapReduce-Anti-Muster vermeiden können.

Kompetenzen, die Sie erwerben

  • Kategorie: Java
  • Kategorie: Leistungsoptimierung
  • Kategorie: Software-Architektur
  • Kategorie: Datenverarbeitung
  • Kategorie: Apache Hadoop
  • Kategorie: System-Konfiguration
  • Kategorie: Skalierbarkeit
  • Kategorie: Big Data
  • Kategorie: Verteiltes Rechnen

Wichtige Details

Zertifikat zur Vorlage

Zu Ihrem LinkedIn-Profil hinzufügen

Bewertungen

12 Aufgaben

Unterrichtet in Englisch

Erfahren Sie, wie Mitarbeiter führender Unternehmen gefragte Kompetenzen erwerben.

 Logos von Petrobras, TATA, Danone, Capgemini, P&G und L'Oreal

Erweitern Sie Ihre Fachkenntnisse

Dieser Kurs ist Teil der Spezialisierung Spezialisierung für Big Data-Verarbeitung mit Hadoop
Wenn Sie sich für diesen Kurs anmelden, werden Sie auch für diese Spezialisierung angemeldet.
  • Lernen Sie neue Konzepte von Branchenexperten
  • Gewinnen Sie ein Grundverständnis bestimmter Themen oder Tools
  • Erwerben Sie berufsrelevante Kompetenzen durch praktische Projekte
  • Erwerben Sie ein Berufszertifikat zur Vorlage

In diesem Kurs gibt es 5 Module

Dieser Kurs bietet eine umfassende Einführung in YARN- und MapReduce-Architekturen und behandelt deren grundlegende Komponenten und Fähigkeiten. Sie werden das MapReduce-Programmiermodell erkunden und sich auf Optimierungstechniken wie Combiner, Partitioner und Komprimierung konzentrieren. Schlüsselkonzepte wie Mapper- und Reducer-Parallelität werden ebenso demonstriert wie praktische Schritte zum Schreiben und Konfigurieren von MapReduce-Aufträgen. Der Kurs befasst sich auch mit fortgeschrittenen Themen wie Multithreading, spekulative Ausführung und Eingabe-/Ausgabeformate. Am Ende des Kurses werden Sie ein tiefes Verständnis von MapReduce erlangen und in der Lage sein, Best Practices in realen Szenarien anzuwenden.

Das ist alles enthalten

2 Lektüren

In diesem Modul werden wir die YARN-Architektur und die architektonischen Fähigkeiten behandeln, gefolgt von der MapReduce-Architektur, die auf YARN aufbaut

Das ist alles enthalten

6 Videos4 Lektüren3 Aufgaben

Dieses Modul bietet einen umfassenden Überblick über die MapReduce API und führt Sie durch die Schritte zum Schreiben eines MapReduce-Programms. Es behandelt die Konzepte der Mapper- und Reducer-Parallelität und veranschaulicht deren Implementierung und Auswirkungen auf die Effizienz der Datenverarbeitung.

Das ist alles enthalten

6 Videos5 Lektüren3 Aufgaben

Dieses Modul konzentriert sich auf fortgeschrittene MapReduce-Optimierungstechniken, einschließlich der Verwendung von Combiners zur Leistungssteigerung, Partitioners zur Verwaltung der Verteilung von Daten über Reducer und Kompressionsmethoden zur Optimierung von I/O. Es behandelt auch die Anwendung von Zählern zur Erfassung und Analyse von Statistiken über MapReduce-Aufträge.

Das ist alles enthalten

6 Videos5 Lektüren3 Aufgaben

Dieses Modul befasst sich mit fortgeschrittenen MapReduce-Konzepten wie Multithreading, den Interna von Eingabe-/Ausgabeformaten und spekulativer Ausführung. Es behandelt auch die lokale Ausführung von Aufträgen und zeigt häufige MapReduce-Anti-Muster auf, die es zu vermeiden gilt.

Das ist alles enthalten

7 Videos5 Lektüren3 Aufgaben

Erwerben Sie ein Karrierezertifikat.

Fügen Sie dieses Zeugnis Ihrem LinkedIn-Profil, Lebenslauf oder CV hinzu. Teilen Sie sie in Social Media und in Ihrer Leistungsbeurteilung.

Dozent

Karthik Shyamsunder
Johns Hopkins University
4 Kurse1.135 Lernende

von

Mehr von Datenmanagement entdecken

Warum entscheiden sich Menschen für Coursera für ihre Karriere?

Felipe M.
Lernender seit 2018
„Es ist eine großartige Erfahrung, in meinem eigenen Tempo zu lernen. Ich kann lernen, wenn ich Zeit und Nerven dazu habe.“
Jennifer J.
Lernender seit 2020
„Bei einem spannenden neuen Projekt konnte ich die neuen Kenntnisse und Kompetenzen aus den Kursen direkt bei der Arbeit anwenden.“
Larry W.
Lernender seit 2021
„Wenn mir Kurse zu Themen fehlen, die meine Universität nicht anbietet, ist Coursera mit die beste Alternative.“
Chaitanya A.
„Man lernt nicht nur, um bei der Arbeit besser zu werden. Es geht noch um viel mehr. Bei Coursera kann ich ohne Grenzen lernen.“
Coursera Plus

Neue Karrieremöglichkeiten mit Coursera Plus

Unbegrenzter Zugang zu 10,000+ Weltklasse-Kursen, praktischen Projekten und berufsqualifizierenden Zertifikatsprogrammen - alles in Ihrem Abonnement enthalten

Bringen Sie Ihre Karriere mit einem Online-Abschluss voran.

Erwerben Sie einen Abschluss von erstklassigen Universitäten – 100 % online

Schließen Sie sich mehr als 3.400 Unternehmen in aller Welt an, die sich für Coursera for Business entschieden haben.

Schulen Sie Ihre Mitarbeiter*innen, um sich in der digitalen Wirtschaft zu behaupten.

Häufig gestellte Fragen