Formation Apache Kafka | administration, supervision et exploitation

• Comprendre l’architecture interne d’Apache Kafka
• Installer et configurer un cluster Kafka en environnement de production
• Administrer les topics, partitions, brokers et réplications
• Superviser un cluster Kafka et analyser ses métriques
• Gérer la sécurité (SSL, SASL, ACL)
• Mettre en oeuvre les bonnes pratiques d’exploitation et de troubleshooting
• Assurer la haute disponibilité et la résilience du cluster

• Administrateur système,
• DevOps, Ingénieur Data,
• Exploitant, SRE,
• Architecte technique, Technical Leader

• Connaissances Linux (ligne de commande) 
• Notions réseaux (TCP/IP, ports, DNS) 
• Bases en systèmes distribués appréciées

Apache Kafka est une plateforme distribuée de streaming permettant la gestion de flux de données en temps réel à grande échelle. 

Cette formation Apache Kafka | administration, supervision et exploitation vous permettra de maîtriser l’installation, la configuration, la supervision et la gestion opérationnelle d’un cluster Kafka en environnement de production. 

Avec notre formateur Yassine SIHI, vous apprendrez à garantir la performance, la sécurité, la haute disponibilité et la résilience de votre infrastructure Kafka, tout en adoptant les bonnes pratiques DevOps et SRE.

Jour 1 – Fondamentaux & Administration de base

• Introduction aux systèmes distribués
  • Complexité des systèmes
  • La motivation derrière Kafka
  • Les plateformes de streaming
• Découverte de Kafka
  • Vue globale
  • Concepts clés : topic, partition, offset, réplication
  • Broker, Controller et Kafka KRAFT
  • Fonctionnement de réplication
  • Stockage des données KAFKA
• Découverte des Clients KAFKA
  • Kafka Producers
  • In-Sync Replicas and ACK
  • Kafka Consumers
  • Groupe de consommateurs
• Administration des topics
  • Création, modification, suppression
  • Politique de rétention (suppression vs compactage)
  • Gestion des partitions et réplication

Travaux pratiques : Création et manipulation de plusieurs topics en ligne de commande.

Jour 2 – Supervision & Exploitation

• Introduction au Schema Registry
  • Rôle et architecture
  • Formats : Avro, JSON Schema
  • Compatibilité
• Supervision d’un cluster Kafka
  • Métriques clés : (latence, throughput, lag, ISR)
  • Monitoring via JMX
  • Intégration avec outils de supervision : Prometheus, Grafana
  • Analyse des métriques critiques
• Optimisation et gestion de la performance
  • Configuration côté client
  • Gestion des groupes de consommateurs
  • Rééquilibrage (rebalancing)
  • Configuration des paramètres brokers
  • Gestion des partitions pour la scalabilité

Jour 3 – Exploitation & Troubleshooting

• Sécurité Kafka
  • Chiffrement SSL/TLS
  • Authentification SASL
  • ACL (Access Control Lists)
  • Bonnes pratiques de sécurisation en production
• Introduction à Kafka Connect
  • Rôle et architecture
  • Mode standalone vs distributed
  • Connecteurs Source vs Sink
     
• Bonnes pratiques d’exploitation
  • Convention de nommage des topics
  • Gestion du stockage disque
  • Surveillance des logs
  • Premières règles de sécurité (principe de base)

Un équilibre pédagogique alliant 60 % théorie et 40 % pratique.

Un questionnaire de positionnement est mis en place en amont de la formation.

L’émargement est réalisé de manière dématérialisée, via une signature numérique.

À l’issue de la formation, chaque participant reçoit l’ensemble des supports pédagogiques, incluant des vidéos et des ressources complémentaires pour approfondir les acquis.

Formation à distance : 
Les sessions se déroulent en classe virtuelle via Microsoft Teams. Elles nécessitent un ordinateur équipé d’une caméra, d’un micro, de haut-parleurs ainsi qu’une connexion internet haut débit.

Le lien de connexion est transmis quelques jours avant le début de la formation.

Formation dans nos locaux et assistance disponible : 

Pour toute complication survenant avant, pendant ou après la formation, notre assistance est disponible à partir de 8h30 au +33 (0)6 47 45 07 82 .

Si vous ne parvenez pas à nous joindre par téléphone, merci de nous écrire à formation@neosoft.fr  en spécifiant en quelques mots la difficulté que vous avez rencontrée. Nous vous répondrons dans les plus brefs délais. 
 

En amont de la formation, un questionnaire de positionnement est adressé aux participants afin d’identifier précisément leurs besoins, leurs attentes et leur niveau de connaissances.

Le formateur évalue la progression pédagogique des participants tout au long de la formation, à travers des quiz, des mises en situation ou des travaux pratiques.

À l’issue de la formation, les participants sont invités à évaluer leur niveau de satisfaction concernant la formation suivie.

Néosoft Training s’appuie sur un processus qualité visant à analyser les éventuels dysfonctionnements remontés par les participants. Cette démarche permet de mettre en œuvre des actions correctives adaptées, tant sur le contenu pédagogique que sur les conditions de déroulement de la formation.