Formation - Spark avec Databricks
Référence : cYjMnu45khkf
Durée : 21 h sur 3 j
Tarif
10 350 €
HT
Logo - M2i Formation
M2i Formation
Mougins
Intra-Entreprise
Une formation intra-entreprise réunit dans une même session les salariés d'une seule entreprise. Elle se déroule généralement dans les locaux de l'entreprise. Le tarif est convenu pour la formation d'un groupe de salarié.

Détails de la formation

Méthodes et outils pédagogiques

Formation délivrée en présentiel ou distanciel* (blended-learning, e-learning, classe virtuelle, présentiel à distance). Le formateur alterne entre méthode démonstrative, interrogative et active (via des travaux pratiques et/ou des mises en situation). Variables suivant les formations, les moyens pédagogiques mis en oeuvre sont : - Ordinateurs Mac ou PC (sauf pour certains cours de l’offre Management), connexion internet fibre, tableau blanc ou paperboard, vidéoprojecteur ou écran tactile interactif (pour le distanciel) - Environnements de formation installés sur les postes de travail ou en ligne - Supports de cours et exercices En cas de formation intra sur site externe à M2i, le client s'assure et s'engage également à avoir toutes les ressources matérielles pédagogiques nécessaires (équipements informatiques...) au bon déroulement de l'action de formation visée conformément aux prérequis indiqués dans le programme de formation communiqué. nous consulter pour la faisabilité en distanciel * ratio variable selon le cours suivi

Objectifs de la formation

A l’issue de cette formation, vous serez capable de :

  • Identifier les caractéristiques principales de Spark et des Databricks
  • Décrire comment les DataFrames sont créées et évaluées dans Spark
  • Appliquer les transformations DataFrame pour traiter et analyser les données
  • Appliquer le streaming structuré pour traiter les données en continu.

Méthodes d'évaluation

  • En cours de formation, par des études de cas ou des travaux pratiques - Et, en fin de formation, par un questionnaire d'auto-évaluation

Pré-requis

Etre capable de développer en Scala ou Python et avoir des connaissances en SQL.

Public cible

Tous publics

Programme

1
Introduction
-Qu'est-ce que Databricks ?-Quels sont les composants de Databricks ?-Démonstration : comprendre l'environnement de Databricks-Créer un compte sur Databricks-Créer un cluster sous Databricks-Considération matérielle-Databricks et le Cloud
2
Databricks : opérations
-Création de votre premier projet Spark sous Databricks-Importer et exporter les données sous Databricks-Accéder aux différentes sources de données-Manager le cluster-Créer un job sous Databricks-Explorer les Data set-Lancer le Notebook-Premier code sous Notebook-Exporter le code sous Databricks-Exemples de travaux pratiques (à titre indicatif)
-Explorer et configurer votre Databricks
-Coder sur DatabricksJour 2
3
Spark : introduction
-Batch vs le temps réel dans le Big Data Analytics-Introduction à Spark-Vue d'ensemble de Spark-Ecosystème Spark-Spark vs Hadoop-Architecture Spark-Streaming Data Spark-Spark Standalone cluster-Spark Web UIJour 3
4
Azure Databricks
-Qu'est-ce que Azure Databricks ?-Quels sont les composants d'Azure Databricks ?-Démonstration : comprendre l'environnement Azure Databricks-Chargement des données-Transformer et nettoyer les données-ETL dans Azure Databricks
-Extraction à partir des Azure Storage Services
-Lecture de plusieurs formats de fichiers
-Application de schémas-Apprentissage automatique dans Azure Databricks-Streaming dans Azure Databricks
5
Spark : concepts
-Remise à niveau Python / Scala-RDD (Resilient Distributed Dataset)-DataFrame-SQL-Streaming-MLlib-GraphX

Sur la même thématique

Logo eDRH Sud PACA - Footer
Nous contacter

Chambre de Commerce
et d’industrie Nice Côte d’Azur

20 Boulevard Carabacel
CS 11259
06005 NICE CEDEX 1

Tel :04 93 13 75 73
(Appel gratuit depuis un poste fixe)