Formation Snowflake, prise en main
Informations générales
Objectifs
Après ce cours, vous serez capable de :
- Découvrir les concepts clés et l’architecture de Snowflake
- Comprendre et utiliser les différents rôles utilisateurs
- Créer et transformer des données dans les bases de données Snowflake
- Importer des données structurées et semi structurées complexes
- Utiliser le cache pour optimiser ses requêtes et ses coûts
- Créer des pipes et stream de données
Public
Ce cours s'adresse avant tout aux personnes suivantes :
- Chefs de projets
- Experts BI
- Ingénieurs système DBA
Prérequis
Pour suivre ce cours, vous devez déjà posséder les connaissances suivantes :
- Bonnes notions de SQL et des Systèmes de gestion de base de données (SGBD).
Programme de la formation
Snowflake premier data warehouse dans le cloud, allie la puissance des entrepôts de données et la flexibilité du cloud. Cette formation a pour objectif de vous faire découvrir l’outil Snowflake via ses différentes fonctionnalités et ses différences dans la construction d’un entrepôt de données.
Introduction
- Bref rappel historique sur les data warehouses.
- Rappel des fondamentaux d’un data warehouse.
- L’évolution des architectures traditionnelles.
- Le cloud computing.
Présentation de Snowflake : concepts clés et architecture
- Snowflake, un Software as a Service (SaaS) : avantages, instances de calcul virtuelles, service de stockage.
- Architecture à trois couches : data base storage, Query Processing, cloud services.
- Connexion à Snowflake : interface web, SnowSQL, pilotes, connecteurs.
- Hiérarchie de stockage : data bases et schémas, tables, views, stages.
- Démonstration :L'écosystème de Snowflake. Connexion à Snowflake.
Prise en main de Snowflake WebUI
- Introduction et "user roles".
- Navigation data base : panneau de propriété bases de données et objets, utiliser les hyperliens, voir les privilèges.
- Exploration des données : navigation, volets d’entrée SQL et de résultats de la worksheet. Exploration avec Worksheet.
- Afficher des statistiques détaillées.
- Export des data via le clip board ou en utilisant un fichier.
- Travaux pratiques : Création d'un compte. Affichage du panneau d’aide. Changement de rôle. Identifier la base de données en cours/objets/schéma. Créer une instruction SQL select. Explorer et afficher les données.
Warehouse Snowflake - Objets DB - Transformations
- Notion de warehouse au sens Snowflake.
- Utilisations du menu de contexte, d’un script SQL pour spécifier le warehouse.
- Fonctionnalité "Code Highlight".
- Les objets data base. Importer les données dans la base.
- Transformations : les fonctions SQL REPLACE, CONCAT. ETL & ELT. Import d’un fichier texte dans une worksheet.
- Travaux pratiques : Création d’un warehouse, d'une BDD, d'une table, d'un format de fichier pour l’import. Effectuer des transformations.
Stockage et requêtage avancé
- Staging data : upload et organisation des données.
- Data storage structures : entité, attribut et relation, séquence.
- Données semi structurées : définition, formats utilisables avec Snowflake, stockage dans une colonne de type VARIANT.
- Données semi structurées complexes : requête, utilisation des fonctions FLATTEN, GET, GET_PATH.
- Travaux pratiques : Charger des données dans un stage. Créer une séquence. Utiliser une séquence avec la fonction NEXT VALUE. Effectuer des requêtes.
Performances
- Les différents niveaux de cache : Result cache, Local Disk cache, Remote Disk.
- Optimiser l’utilisation du cache.
- Bonnes pratiques d'optimisation en management : des warehouses, des coûts.
- Bonnes pratiques en sécurité et gestion des rôles.
- Travaux pratiques : Analyses du cache, optimiser son utilisation.
Design & Deploy
- Planifier des exécutions à l’aide des Tasks.
- Réplication des objets à l’aide du clonage et du time travel.
- Création de pipelines et streaming de données (change data capture).
- Travaux pratiques : Planifier des exécutions. Faire du clonage. Créer des pipelines et des streaming.Présentation d’un cas métier
- Présentation d’un cas métier : vision 360° d'une chaîne logistique.
Méthode pédagogique
Chaque participant travaille sur un poste informatique qui lui est dédié. Un support de cours lui est remis soit en début soit en fin de cours. La théorie est complétée par des cas pratiques ou exercices corrigés et discutés avec le formateur. Le formateur projette une présentation pour animer la formation et reste disponible pour répondre à toutes les questions.
Méthode d'évaluation
Tout au long de la formation, les exercices et mises en situation permettent de valider et contrôler les acquis du stagiaire. En fin de formation, le stagiaire complète un QCM d'auto-évaluation.
Certification
N'hésitez pas à nous contacter pour toute information complémentaire.
SnowPro® Advanced Data Engineer (420 €HT)
L'examen SnowPro Advanced: Data Engineer Certification testera les connaissances et compétences avancées utilisées pour appliquer des principes complets d'ingénierie des données à l'aide de Snowflake.
Pour passer l'examen, vous devez justifier d'au moins 2 ans d'expérience en tant que praticien Snowflake dans un rôle d'ingénierie de données (poste de Data Engineer ou Software Engineer).
Cette certification testera votre capacité à :
- Sourcer des données à partir de Data Lakes, d'API et sur site,
- Transformer, répliquer et partager des données sur des plateformes cloud,
- Concevoir des flux de bout en bout en temps quasi réel,
- Concevoir des solutions de calcul évolutives pour les charges de travail Data Engineer,
- Évaluer les indicateurs de performance
L'examen évaluera les compétences au moyen de questions basées sur des scénarios et exemples concrets. Pour préparer cet examen, nous recommandons une combinaison d'expérience pratique, de formation dirigée par un instructeur.
Suivre cette formation à distance
- Un ordinateur avec webcam, micro, haut-parleur et un navigateur (de préférence Chrome ou Firefox). Un casque n'est pas nécessaire suivant l'environnement.
- Une connexion Internet de type ADSL ou supérieure. Attention, une connexion Internet ne permettant pas, par exemple, de recevoir la télévision par Internet, ne sera pas suffisante, cela engendrera des déconnexions intempestives du stagiaire et dérangera toute la classe.
- Privilégier une connexion filaire plutôt que le Wifi.
- Avoir accès au poste depuis lequel vous suivrez le cours à distance au moins 2 jours avant la formation pour effectuer les tests de connexion préalables.
- Votre numéro de téléphone portable (pour l'envoi du mot de passe d'accès aux supports de cours et pour une messagerie instantanée autre que celle intégrée à la classe virtuelle).
- Selon la formation, une configuration spécifique de votre machine peut être attendue, merci de nous contacter.
- Pour les formations incluant le passage d'une certification la dernière journée, un voucher vous est fourni pour passer l'examen en ligne.
- Pour les formations logiciel (Adobe, Microsoft Office...), il est nécessaire d'avoir le logiciel installé sur votre machine, nous ne fournissons pas de licence ou de version test.
- Horaires identiques au présentiel.
Mis à jour le 12/12/2024