Apache Kafka, centraliser les flux de données en temps réel

Présentation du projet Kafka

• Retour sur l’historique du projet
• L’intérêt de Kafka dans le Big Data
• L’architecture fonctionnelle de Kafka
• Les composants du système : brokers, topics, consumer, producers
• Principes de fonctionnement

Installation

• Installer Kafka
• Configurer les composants
• Installer l’écosystème de développement de Kafka
• Installer le matériel nécessaire
• Effectuer des manipulations de base Configuration et utilisation des APIs
• Etudier la conception des APIs et leur implémentation
• Comprendre les cas d’usages et les solutions
• Gérer la couche réseau et le format des messages
• Gérer, administrer et compacter les Logs
• Gérer le schéma de distribution des données
• Effectuer les actions de base sur les topics
• Gérer les Datacenters
• Monitorer le système et gérer les alertes
• Mise en œuvre de Zookeeper

Mise en place de la sécurité du système

• Comprendre les enjeux et les principes de sécurité d’un système Kafka
• Utiliser le protocole SSL/TLS pour le cryptage et l’authentification
• Utiliser la couche SASL pour l’authentification
• Utiliser des listes de contrôle ACL pour les autorisations
• Authentifier avec Zookeeper

Aller plus loin avec Kafka

• Data stream scalable avec Kafka Connect
• Utiliser Kafka Connect pour l’intégration de données
• Développer des connecteurs personnalisés
• Mettre en œuvre KSQL Travaux pratiques: Développement d’un mini-projet faisant communiquer entre elles plusieurs applications en passant par Kafka

Avoir des notions d’architectures applicatives en entreprise, des connaissances des protocoles réseaux, de bonnes connaissances en Java ou autre langage. Des connaissances en Spring ou Node.js sont recommandées.

Mettre en oeuvre l’outil d’Apache Kafka pour utiliser un système de messagerie distribuée à haut débit.

À l’issue de chaque module, le formateur évaluera chacun des participants en fonction des cas pratiques et exercices effectués.

Une attestation de formation vous sera remise.

• Alternance d’exercices, cas pratiques, QCM et de notions théoriques, projet Fil Rouge.
• Evaluations régulières et retour du formateur sur les points moins bien assimilés.
• Les supports de cours seront mis à disposition via notre la plate-forme de téléchargement AJC Classroom.
• Accès à notre plateforme à distance de Classe Virtuelle
  Mêmes possibilités et interactions avec votre formateur que lors d’une formation présentielle. En effet, votre formation se déroulera en connexion continue 7h/7 :
  • • • Echanges directs avec le formateur et l’équipe pédagogique à travers la visioconférence, les forums et chats
      • Vérification de l’avancement de votre travail et évaluation par votre formateur à l’aide d’exercices et de cas pratiques
      • Suivi pédagogique et conseils personnalisés pendant toute la formation

   

  Vous recevrez les informations de connexion par mail dès votre inscription. En cas de problème de connexion, vous pourrez joindre notre équipe à tout moment (avant ou même pendant la formation) au 0182837241 ou par mail à l’adresse hotline@ajc-formation.fr.

Les personnes en situation de handicap sont invitées à nous communiquer leurs besoins spécifiques. Nous ferons tout pour les mettre dans les meilleures conditions de suivi de la formation (compensation, accessibilité…)