Dans ce module, nous vous présenterons Apache Kafka, en explorant ses origines et son rôle au sein des pipelines de données. Vous vous familiariserez également avec la terminologie essentielle de Kafka et ses API clientes, qui sont indispensables à la messagerie et au traitement des flux.

Dans ce module, nous allons approfondir les composants internes de Kafka, tels que les sujets, les partitions et la réplication. Vous apprendrez à configurer un environnement de broker Kafka en local et à explorer l'architecture distribuée de Kafka pour le traitement de flux à haut débit.

Dans ce module, nous vous présenterons l'application « Library Inventory », qui servira de base à l'intégration de Kafka tout au long de la formation. Vous apprendrez comment Kafka est utilisé pour rationaliser et gérer les événements au sein du système.

Dans ce module, nous vous guiderons dans la création d'un producteur Kafka à l'aide de Spring Boot. Vous commencerez par configurer le projet de base, puis vous développerez la logique de production des messages, notamment en utilisant KafkaTemplate pour la publication des messages.

Dans ce module, nous aborderons l'importance des tests d'intégration pour les applications Kafka. Vous apprendrez à rédiger et à configurer des tests pour le producteur et le consommateur Kafka, en tirant parti d'Embedded Kafka afin de bénéficier d'un environnement de test fiable et isolé.

Dans ce module, nous aborderons les principes fondamentaux des tests unitaires pour les applications Spring Boot. Vous apprendrez à rédiger des tests unitaires pour vos API REST et à mettre en place une gestion des erreurs pour les requêtes non valides, afin de garantir une gestion robuste des erreurs.

Dans ce module, nous nous concentrerons sur la création d'un point de terminaison PUT permettant de mettre à jour les événements de la bibliothèque et d'envoyer des messages associés à des clés spécifiques. Vous comprendrez comment fonctionne le partitionnement par clé dans Kafka et son importance pour la distribution des données.

Dans ce module, nous allons examiner les configurations des producteurs Kafka qui ont une incidence sur les performances et la fiabilité. Vous apprendrez à ajuster des paramètres importants, tels que le comportement en cas de nouvelle tentative, afin de gérer les problèmes réseau ou les pannes de broker.

Dans ce module, nous nous concentrerons sur la mise en place d'un consommateur Kafka sous Spring Boot. Vous configurerez des consommateurs Kafka à l'aide de profils Spring et utiliserez l'annotation @KafkaListener pour traiter les messages Kafka entrants.

Dans ce module, nous allons découvrir le fonctionnement des groupes de consommateurs Kafka et illustrer les effets du rééquilibrage sur la consommation des messages. Vous découvrirez les stratégies de gestion des offsets par défaut et manuelles dans Spring Kafka, et vous apprendrez à configurer des consommateurs simultanés pour un traitement parallèle des messages afin d'optimiser votre configuration de consommateurs Kafka.

Dans ce module, nous allons configurer une base de données en mémoire H2 pour stocker les événements de la bibliothèque. Vous apprendrez également à créer des entités JPA pour les classes `LibraryEvent` et `Book`, et à développer la couche de service chargée de gérer l'ajout et la modification des événements, afin de garantir des interactions fluides avec la base de données pour les événements de la bibliothèque.

Dans ce module, nous allons configurer Embedded Kafka afin de tester le comportement des consommateurs en environnement isolé. Vous créerez des tests d'intégration pour valider les événements de bibliothèque (nouveaux et mis à jour), et vous apprendrez à gérer des scénarios d'erreur tels que les mises à jour non valides. De plus, nous aborderons l'utilisation de TestContainers pour les tests d'intégration basés sur une base de données.

Dans ce module, nous aborderons en détail la gestion des erreurs des consommateurs Kafka, la création de gestionnaires d'erreurs personnalisés et la configuration de politiques de réessai avec délai d'attente exponentiel. Vous mettrez également en œuvre des stratégies de récupération, telles que l'utilisation de sujets de réessai, de sujets de messages perdus et l'enregistrement des messages ayant échoué dans des bases de données en vue d'une intervention manuelle et d'un traitement ultérieur.

Dans ce module, nous nous intéresserons à la gestion des erreurs et aux stratégies de réessai pour les producteurs Kafka. Vous apprendrez à configurer les réessais lorsque les brokers Kafka sont indisponibles ou lorsque les exigences de réplication ne sont pas respectées, ainsi qu’à gérer les messages ayant échoué en vue de leur récupération.

Dans ce module, nous aborderons la sécurité de Kafka, en mettant particulièrement l'accent sur le chiffrement SSL pour une transmission sécurisée des données. Vous apprendrez comment fonctionne le protocole SSL dans Kafka, comment le configurer dans un cluster local, ainsi que les bonnes pratiques en matière de gestion des certificats SSL au niveau de l'entreprise.

Dans ce module, nous vous guiderons dans la sécurisation de vos applications Spring Boot afin qu’elles puissent interagir avec un cluster Kafka prenant en charge le protocole SSL. Vous apprendrez à configurer à la fois le producteur et le consommateur Kafka pour qu’ils puissent se connecter en toute sécurité au cluster Kafka et échanger des données avec celui-ci à l’aide du chiffrement SSL.