Acquérez des bases solides sur Apache Spark avec Scala et apprenez à développer des applications Big Data évolutives, depuis les concepts fondamentaux jusqu’au traitement des données en temps réel. Ce cours présente l’architecture de Spark, son intégration avec YARN, ainsi que les concepts essentiels de la programmation en Scala, notamment les variables, les fonctions, les boucles, les collections, les traits, les classes abstraites, la gestion des exceptions et les modificateurs d’accès.

Au fil de la formation, vous travaillerez avec les Resilient Distributed Datasets (RDD), apprendrez à distinguer les transformations des actions, et mettrez en œuvre Spark Streaming avec le fenêtrage et les points de contrôle pour un traitement des données en temps réel tolérant aux pannes. Vous construirez également un projet Spark à l’aide de Maven, intégrerez des API externes telles que Twitter et évaluerez Hadoop 1.x et 2.x pour une gestion efficace des ressources dans les environnements Spark. Conçu pour les futurs ingénieurs de données, les développeurs Big Data et les apprenants intéressés par le traitement distribué des données, ce cours combine la programmation Scala avec des workflows Spark concrets. À l’issue de ce cours, vous serez capable d’appliquer les principes fondamentaux de Scala, d’optimiser les opérations RDD, de mettre en œuvre des pipelines de streaming fiables et de créer des applications Spark de bout en bout pour une analyse de données évolutive.