"Big Data" ist ein weit verbreiteter Begriff, der unsere datenreiche Welt beschreibt, in der praktisch jede Aktivität einen digitalen Datenfußabdruck erzeugt, der gesammelt und analysiert werden kann. Daten und Datenanalyse sind zwar nicht unbedingt neu, aber die effektive Nutzung der extrem großen - und schnell wachsenden - Datenmengen von heute erfordert neue Ansätze für die Datenverwaltung.

Um Big Data für wichtige Anwendungen wie maschinelles Lernen und künstliche Intelligenz nutzbar zu machen, brauchen Sie mehr als eine Excel-Tabelle oder eine herkömmliche relationale Datenbank und SQL. Stattdessen ist eine komplette Dateninfrastruktur erforderlich, um diese Daten in großem Umfang zu sammeln und zu verarbeiten, einschließlich Datenpipelines, Data Lakes und Data Warehouses.

Um dies zu ermöglichen, verlassen sich Dateningenieure auf neue Ansätze zur Datenverarbeitung wie das von Google entwickelte MapReduce, das Open-Source-Ökosystem Apache Hadoop einschließlich Apache Spark und Apache Hive sowie zunehmend auf Cloud Computing und Cloud-Datenbankplattformen wie Cloudera. ‎

Da Unternehmen in praktisch jeder Branche nach Möglichkeiten suchen, die Leistungsfähigkeit von Big Data für ihre Arbeit zu nutzen, kann ein Hintergrund in diesem Bereich die Türen zu einer breiten Palette von Karrieren öffnen. Betriebsleiter in Produktions- oder Logistikunternehmen können Daten nutzen, um ihre Bedarfsprognosen, Bestandsplanung und Prozesseffizienz zu verbessern; digitale Vermarkter nutzen Marketinganalysen, um ihre Kunden und die Wirksamkeit ihrer Botschaften besser zu verstehen; und "Quants" bei Hedgefonds verlassen sich auf datenbasierte finanztechnische Ansätze, um Millionen von Dollar in Millisekunden zu bewegen.

Zu verstehen, wie Big-Data-Anwendungen aufgebaut sind und was sie leisten können, kann also unglaublich wertvoll sein, auch wenn man selbst kein Dateningenieur oder Datenwissenschaftler ist. Wenn Sie jedoch das Fachwissen und den Wunsch haben, selbst direkt mit Big Data zu arbeiten, sind Dateningenieure für den Aufbau der Dateninfrastruktur verantwortlich, die Big Data zuverlässig und effizient in großem Umfang bereitstellen kann, und Datenwissenschaftler für die Anwendung einer breiten Palette von Analyse- und Programmieransätzen, um daraus Erkenntnisse zu gewinnen.

Die Nachfrage nach diesen beiden Funktionen ist extrem hoch, und die Gehälter sind entsprechend hoch. Laut Glassdoor verdienen Data Engineers ein durchschnittliches Jahresgehalt von 102.864 $ und Data Scientists ein durchschnittliches Jahresgehalt von 113.309 $. ‎

Ja - Coursera ist in der Tat einer der besten Orte, um etwas über Big Data zu lernen. Sie können einzelne Kurse und kursübergreifende Spezialisierungen zu Big Data, Datenverarbeitung und verwandten Themen von hochkarätigen Universitäten aus aller Welt belegen, von der University California San Diego bis zur Universitat Autònoma de Barcelona. Coursera bietet auch die Möglichkeit, von Branchenführern wie Google Cloud, Cloudera und IBM zu lernen, einschließlich der Option, ein Berufszertifikat zu erwerben. ‎