Formation - Ingestion de données avec Kafka
Référence : LUzlNCoHQrfX
Durée : 14 h sur 2 j
Tarif
6 900 €
HT
Logo - M2i Formation
M2i Formation
Mougins
Intra-Entreprise
Une formation intra-entreprise réunit dans une même session les salariés d'une seule entreprise. Elle se déroule généralement dans les locaux de l'entreprise. Le tarif est convenu pour la formation d'un groupe de salarié.

Détails de la formation

Méthodes et outils pédagogiques

Formation délivrée en présentiel ou distanciel* (blended-learning, e-learning, classe virtuelle, présentiel à distance). Le formateur alterne entre méthode démonstrative, interrogative et active (via des travaux pratiques et/ou des mises en situation). Variables suivant les formations, les moyens pédagogiques mis en oeuvre sont : - Ordinateurs Mac ou PC (sauf pour certains cours de l’offre Management), connexion internet fibre, tableau blanc ou paperboard, vidéoprojecteur ou écran tactile interactif (pour le distanciel) - Environnements de formation installés sur les postes de travail ou en ligne - Supports de cours et exercices En cas de formation intra sur site externe à M2i, le client s'assure et s'engage également à avoir toutes les ressources matérielles pédagogiques nécessaires (équipements informatiques...) au bon déroulement de l'action de formation visée conformément aux prérequis indiqués dans le programme de formation communiqué. nous consulter pour la faisabilité en distanciel * ratio variable selon le cours suivi

Objectifs de la formation

A l’issue de cette formation, vous serez capable de :

  • Décrire l'architecture de Kafka et son mode de fonctionnement dans un contexte multiclients
  • Publier et récupérer des données vers un cluster Kafka
  • Créer vos propres Consumers et Producers pour envoyer des données vers Kafka et lire des données depuis Kafka
  • Ecrire des applications de streaming avec Kafka Streams.

Méthodes d'évaluation

  • En cours de formation, par des études de cas ou des travaux pratiques - Et, en fin de formation, par un questionnaire d'auto-évaluation

Pré-requis

Avoir des connaissances de développement en Java ou C# ou Python.

Public cible

Tous publics

Programme

1
Apache Kafka, les fondamentaux
-Plateforme de diffusion d'évènements distribuée-L'abstraction des logs dans la diffusion d'évènements distribués-Brokers, topics, partitions et segments-Enregistrements (alias messages, événements)-Politiques de rétention-Producteurs, consommateurs et sérialisation-La réplication-Connexion Kafka
2
Installation et architecture
-Installation et options avancées-Considération matérielle (hardware)-Fichiers journaux de Kafka-Réplication et fiabilité-Chemins d'écriture et de lecture de Kafka-Partitions, consumer groups et scalability-Exemples de travaux pratiques (à titre indicatif)
-Installation de Kafka
-Utilisation de Kafka "command line tools"
3
Producers sous Kafka
-L'architecture d'un Producers Kafka-Le partitionnement basé sur les clés-Kafka Acks-Configuration des paramètres-Créer un fichier "producer.properties" personnalisé-Utilisation du BatchingJour 2
4
Consumers sous Kafka
-Les partitions et leurs rôles dans l'évolutivité et la tolérance aux pannes-Configuration des consumers-Créer un fichier "consumer.properties" personnalisé-Utiliser l'API du consommateur pour gérer les décalages-Optimiser les requêtes de récupération
5
Gestion des schémas dans Kafka
-Introduction à Avro-Les schémas Avro-Utilisation du Schema Registry

Sur la même thématique

Logo eDRH Sud PACA - Footer
Nous contacter

Chambre de Commerce
et d’industrie Nice Côte d’Azur

20 Boulevard Carabacel
CS 11259
06005 NICE CEDEX 1

Tel :04 93 13 75 73
(Appel gratuit depuis un poste fixe)