Organisme de Formation aux technologies et métiers de L'informatique

Formation Confluent Stream Processing using Apache Kafka® Streams & ksqlDB

Informations générales

KAFKASTR
3 jours (21h)
2 100 €HT

Objectifs

Après ce cours, vous serez capable de :

  • Identifier des modèles communs et des cas d’utilisation pour le traitement de flux en temps réel
  • Identifier l’architecture de haut niveau d’Apache Kafka® Streams
  • Écrire des applications en temps réel avec l’API Kafka Streams pour filtrer, transformer, enrichir, agréger et joindre des flux de données
  • Décrire comment ksqlDB combine les capacités de traitement de flux élastiques, tolérantes aux pannes et hautes performances de Kafka Streams avec la simplicité d’une syntaxe de type SQL
  • Créer des requêtes ksqlDB qui mettent en valeur son équilibre de puissance et de simplicité
  • Tester, sécuriser, déployer et surveiller les applications Kafka Streams et les requêtes ksqlDB
plus d'infos

Prérequis

Pour suivre ce cours, vous devez déjà posséder les connaissances suivantes :

  • Avoir suivi les cours
  • Confluent Fundamentals for Apache Kafka®
  • Confluent Developer Skills for Building Apache Kafka®

Public

Ce cours s'adresse avant tout aux personnes suivantes :

  • développeurs d’applications
  • architectes
  • ingénieurs DevOps
  • data scientists

Programme de la formation

Au cours de cette formation pratique de trois jours pour les développeurs Apache Kafka, vous apprendrez à créer des applications en temps réel pour filtrer, transformer, enrichir, agréger et rejoindre les flux de données pour découvrir les anomalies, analyser les comportements, ou surveiller des systèmes complexes.

Vous apprendrez l’architecture des flux Kafka ainsi que la création d’applications avec Kafka Streams DSL et KSQL.

Le cours couvre également le déploiement, la sécurisation et la supervisioon des applications Kafka en temps réel.

Motivation et concepts pour les streams

  • Motivation et cas d’utilisation pour le streaming en temps réel
  • Comparaison de haut niveau de Kafka Streams et de ksqlDB
  • Concepts de traitement de flux

Architecture Kafka Streams

  • La place de Kafka Streams dans l’écosystème de Kafka
  • Conception d’architecture de haut niveau
  • Types de données Kafka Streams

Ecrire des applications Kafka Streams

  • Anatomie d’une application Kafka Streams
  • Kafka Streams DSL — Opérations stateless
  • Kafka Streams DSL — Agrégations
  • Kafka Streams DSL — Agrégations fenêtrées
  • Kafka Streams DSL — Jointures
  • Kafka Streams DSL — Résumé
  • Processor API
  • Optimisations

Tester des applications Kafka Streams

  • Obtenez des flux de données vers et depuis Kafka avec Kafka Connect et REST Proxy
  • Maintenir les formats de données et assurer la compatibilité avec Schema Registry et Avro
  • Créez des applications de streaming en temps réel avec Confluent ksqlDB et Kafka Streams

La plateforme Confluent

  • Tests unitaires
  • Tests d’intégration
  • Tests d’effort
  • Tests de bout en bout

Introduction à ksqlDB

  • Exemples de cas d’utilisation
  • Exemples de bout en bout
  • Interagir avec ksqlDB

Utilisation de ksqlDB

  • Manipulation de données
  • Agrégations
  • Tester

Déploiement

  • Parallélisme
  • Élasticité
  • Tolérance aux pannes
  • Planification de capacité
  • Dépannage
  • Considérations spécifiques à ksqlDB

Sécurité

  • Aperçu de la sécurité
  • Contrôle d’accès
  • Considérations spécifiques à ksqlDB

Surveillance

  • JMX
  • Confluent Control Center
  • Considérations spécifiques à ksqlDB

Méthode pédagogique

Chaque participant travaille sur un poste informatique qui lui est dédié. Un support de cours lui est remis soit en début soit en fin de cours. La théorie est complétée par des cas pratiques ou exercices corrigés et discutés avec le formateur. Le formateur projette une présentation pour animer la formation et reste disponible pour répondre à toutes les questions.

Méthode d'évaluation

Tout au long de la formation, les exercices et mises en situation permettent de valider et contrôler les acquis du stagiaire. En fin de formation, le stagiaire complète un QCM d'auto-évaluation.

Mis à jour le 23/01/2024