Spark (3 jours)

Revenir aux formations

Cette formation permet de comprendre la technologie Spark au travers des besoins de data engineering et d’être prêt à l’utiliser dans un contexte projet complexe. La formation est donnée avec le langage Scala.
#batch #bestpractices #bigdata #cloud #dataarchitecture #dataengineering #datascience #spark #streaming

Objectifs

Être capable d’utiliser Spark pour créer de nouveaux pipeline de données, en production et en suivant les bonnes pratiques.

Contenu de la formation

Répartition : 50% théorique / 50% pratique

Jour 1

• Introduction
  • Formateurs
  • Ippon
  • Qu’est-ce que Spark ?
  • Le pattern map-reduce
• Scala basics
  • Pourquoi Scala ?
  • Scala basics
• Spark API - RDD
  • Resilient Distributed Dataset
  • Transformations
  • Actions
  • Partitioning
  • Lineage & Persistence
  • Shared variables
  • Tuning
  • Hand’s on
• Spark API - Dataframes et Datasets
  • Read & Write
  • DSL
  • SQL
  • Hand’s on

Jour 2

• Spark en cluster
  • In practice
  • Data Locality
  • Hands-on
  • Cloud concerns
• Coding dojo - Bonnes pratiques
  • 9 exercices sur les bonnes pratiques de Spark

Jour 3

• Spark ML
  • Spark ML
  • Hands-on
  • Cross Validation
  • Hands-on
• Spark Streaming
  • Spark Streaming
  • Comparaison
  • Structured Streaming
  • Hands-on
  • Continuous streaming

Informations complémentaires

Le niveau requis pour participer a la formation : développeur débutant

Le niveau atteint a l'issue de la formation : Spark Confirmé

Préréquis : Aucun

Localisation : Cette formation est disponible sur Paris comme en province.
Pour plus de détails, contactez nous