La formation Flux de données avec Storm vous permet de savoir mettre en œuvre Storm pour le traitement de flux de données.
Flux de données avec Storm (CB038)
Diplôme
Certificat ESIEE-IT
Durée
2 jours (soit 14 heures)
Coût
En intra seulement
Campus
Paris 9ème ou à distance
Flux de données avec Storm
Savoir mettre en oeuvre Storm pour le traitement de flux de données.
Introduction
- Présentation de Storm : fonctionnalités, architecture, langages supportés
- Définitions : spout, bolt, topology.
Architecture
- Etude des composants d'un cluster Storm : master node 'nimbus' et worker nodes
- Positionnement par rapport à un cluster Hadoop. Le modèle de données. Différents types de flux.
Premiers pas
- Configuration d'un environnement de développement. Installation d'un cluster Storm. Travaux pratiques sur le projet storm-starter.
Flux de données
- Définition du nombre de flux dans un noeud, création de topologies regroupant des flux entre différents noeuds,
- communication entre flux en JSON, lecture de flux d'origines diverses (JMS, Kafka, ...).
Haute disponibilité
- Tolérance aux pannes: principe de fiabilisation des master node, workers node, nimbus
- Garantie de traitement des flux: principe, paramètres TOPOLOGY_MESSAGE_TIMEOUT_SECS, TOPOLOGY_ACKERS
- Traitements temps réel avec Trident. Elasticité: traitements concurrents dans un cluster storm, ajouts de nœuds, commande 'storm rebalance'.
À qui s’adresse cette formation ?
Chefs de projet, data scientists, développeurs.
Quels sont les prérequis ?
Connaissance d'un langage de programmation comme Java ou Python.
Méthodes pédagogiques
- Apports théoriques suivis d’applications
- Travaux pratiques réalisés
Méthodes d'évaluations
- QCM d'évaluation des acquis
- À l’issue de cette formation, un certificat ESIEE-IT vous sera délivré.
Pour vous inscrire, envoyez un mail à formationcontinue@esiee-it.fr (réponses sous 48heures).
Informations complémentaires
Texte
Prochaines sessions :
- Nous consulter
- Horaires : 9h00 à 17h30
- Taux de réussite : nouvelle formation
- 100% à distance (D) ou en présentiel (P)
- Si vous êtes en situation de handicap, retrouvez toutes les informations utiles ICI