Formation Databricks

Présentation

Databricks simplifie votre process Big Data. Cette plateforme créée par les fondateurs d’Apache Spark rend plus sûr le déroulement du processus ETL.

En effet, Databricks utilise l’architecture d’Apache Spark en y ajoutant des pipelines fiables et puissants. L’outil fournit une gestion automatisée des clusters et des notebooks de style IPython.

Les pipelines de données peuvent être écrits dans de nombreux langages (Scala, SQL, R, Python) conçus dans des workspaces collaboratifs.

Databricks est également rigoureusement sécurisé grâce à un modèle de protection unifié comportant toutes les fonctionnalités (gestion des identités, cryptage…).

Notre formation Databricks vous présentera comment élaborer un processus ETL complet. Nous commencerons par la présentation du système, puis, l’extraction des données, leurs chargements, leurs transformations et enfin nous évoquerons les dashboards et l’utilisation d’IntelliJ IDE.

Comme toujours, nous vous présenterons la dernière version de l’outil, Databricks 14.

Objectifs

• Bien connaître les spécificités de Databricks
• Extraire les données avec Databricks
• Savoir comment transformer et charger ses données
• Utiliser les dashboards et déployer son processus

Public visé

• Développeurs
• Data Engineer
• Architectes
• Administrateurs système
• Data miners
• Data scientists
• Data analysts
• Business intelligence analysts
• Market inteligence analysts

Pré-requis

• Avoir idéalement suivi nos formations Spark ML ou Spark Tuning Avancé
• Connaissance de Scala, SQL et idéalement Python
• Disposer d’un compte Databricks