Formation Apache Pinot

Programme de notre formation Apache Pinot

Présentation de l’outil

• Qu’est-ce qu’Apache Pinot
• Pourquoi et quand l’utiliser?
• Installation
• Configuration

Le fonctionnement d’Apache Pinot

• L’architecture de Pinot
• Le modèle de stockage
• Ingérer des données
• Le fonctionnement d’une requête
• Présentation des composants (cluster, controller, broker…)

Premier pas avec Pinot

• Créer son premier cluster
• Préparation de données
• Création du schéma
• Créer un segment
• Créer sa table
• Écrire sa première requête
• Les techniques d’indexation (forward, inverted, star-tree…)

Pinot SQL

• Identifiers vs literals
• Différences avec SQL
• Les transformations et fonctions de groupe supportées
• Requêtes CASE WHEN
• UDF et colonnes BYTES

Programmation

• Les différents modules Pinot
• Fonctions d’agrégation personnalisées
• Manipuler des segments
• Les différents plugins

Développement avancé

• Configuration de Pinot pour un usage avancé
• Créer un stream pour l’ingestion des données
• Transformation avancée

Déploiement et monitoring

• Contrôle d’accès
• Les principales métriques pour le monitoring
• Créer des métriques personnalisées
• Tuning Pinot

Module complémentaire : Docker & Kubernetes (+1 jour)

Apache Pinot avec Docker

• Présentation de Docker
• Configuration de l’outil
• Commandes batch
• Stream processing
• Stream hybride

Apache Pinot avec Kubernetes

• Présentation de Kubernetes
• Configuration de l’outil
• Créer son cluster
• Charger ses données avec Kafka
• Pinot Data Explorer
• Utiliser presto pour les requêtes ad hoc