Formation Semarchy xDI avancé

Programme de notre formation Semarchy xDI avancé

[Jour 1 – Matin]

Conception de mappings complexes et résilients

• Rappel des principes d’architecture d’un projet Semarchy xDI orienté maintenabilité
• Conception de mappings multi-sources avec jointures, unions, filtres et expressions complexes
• Maîtrise des stages pour isoler les transformations, contrôler les données et optimiser les traitements
• Gestion des contraintes, des valeurs nulles, des doublons et des règles de qualité dans les flux
• Structuration des flux de rejets pour assurer la traçabilité et le retraitement des anomalies
• Atelier pratique : Construire un mapping multi-sources avec staging, règles de contrôle et table de rejets.

[Jour 1 – Après-midi]

Optimisation des chargements et traitements de données

• Analyse des facteurs influençant les performances des mappings et des processus
• Choix des stratégies de chargement, insertions, mises à jour, suppressions et détection des données inchangées
• Optimisation des traitements par partitionnement logique, limitation des volumes et réduction des mouvements de données
• Exploitation des possibilités des connecteurs JDBC et des traitements exécutés au plus près des sources
• Mise en place de mécanismes de contrôle des volumes, de réconciliation et d’audit de chargement
• Atelier pratique : Optimiser un chargement incrémental et mesurer les gains obtenus sur un jeu de données volumineux.

[Jour 2 – Matin]

Orchestration, paramétrage et fiabilité opérationnelle

• Conception de processus réutilisables pour orchestrer des chaînes de traitements complexes
• Utilisation avancée des variables, paramètres, contextes d’exécution et configurations par environnement
• Gestion des dépendances, des branches conditionnelles, des boucles et des exécutions parallèles
• Mise en oeuvre de stratégies de reprise sur incident, d’idempotence et de relance contrôlée
• Intégration de fichiers, services REST et mécanismes d’authentification dans une orchestration sécurisée
• Atelier pratique : Créer un processus paramétrable avec contrôles, branchement d’erreur et reprise après échec.

[Jour 2 – Après-midi]

Industrialisation, déploiement et supervision

• Organisation des projets, des livrables et des versions pour fiabiliser le cycle de vie des développements
• Préparation des packages et gestion des configurations de déploiement entre développement, recette et production
• Administration des exécutions avec Semarchy xDI Analytics et lecture des indicateurs de suivi
• Analyse des journaux, diagnostic des erreurs et identification des causes racines
• Définition de bonnes pratiques de supervision, d’alerting, de documentation et de support de production
• Atelier pratique : Déployer un flux paramétré, analyser une exécution en erreur et mettre en place un plan de remédiation.