Apache Kafka : streaming de données

Objectifs pédagogiques

- Déployer et configurer Kafka.

- Produire et consommer des messages.

- Gérer les topics, partitions et réplicas.

- Assurer la fiabilité et la résilience des flux.

Durée et format

3 jours

Formation synchrone en téléprésentiel

‍

Tarifs

Tarif inter-entreprises : 2 160 € / participant

Tarif intra-entreprise : sur demande

Publics

Développeurs, data engineers.

Notions de messagerie.

Vous avez 1 jour pour réaliser ce travail de développement d'agents et de sécurisation des échanges. Vous réaliserez ce travail en binôme. L'entraide entre les différents groupes est bienvenue.

‍

Modalités d'évaluation

• votre responsable technique (formateur) validera en binôme le bon fonctionnement de votre logique de production/consommation et la résistance aux coupures réseau.
• votre responsable technique animera une review collective du code à partir d'un des livrables du groupe, tiré au hasard.
  ‍

Critères d'évaluation

• La livraison est garantie : les tests d'injection de données prouvent une absence totale de perte et de doublons dans le système récepteur (cohérence stricte validée).
• La parallélisation est effective : les messages sont distribués et consommés de façon équilibrée sur l'ensemble des partitions logiques disponibles.
• La reprise après panne est robuste : en simulant l'arrêt brutal d'un agent de lecture au milieu d'un flux, le système reprend son traitement exactement là où il s'était arrêté, sans omettre aucun message.
  ‍

Livrables

• le code source applicatif (.py, .java ou .go) contenant la logique d'initialisation des producteurs sécurisés et des consommateurs synchrones
• le fichier de configuration des propriétés techniques contenant les paramètres d'acquittement, d'identifiants de transaction et de politiques de reconnexion
• une capture d'écran des journaux d'exécution démontrant la réassignation automatique de la charge de lecture lors de la déconnexion provoquée d'un des consommateurs

Si vous êtes en situation de handicap, il est possible de mettre en place des aménagements.

Prochaine session le 25 Novembre 2026.