Formation Semarchy xDI : Intégration de Données

Programme de notre formation Semarchy xDI

[Jour 1 – Matin]

Architecture et environnement de conception

• Panorama de Semarchy xDI et positionnement dans une architecture d’intégration
• Rôle de xDI Designer, du Runtime et de xDI Analytics
• Organisation du workspace, des projets et des ressources de développement
• Découverte de l’interface, des vues, des perspectives et des assistants de conception
• Principes de traçabilité, de réutilisabilité et de nommage des objets techniques

[Jour 1 – Après-midi]

Métadonnées et premiers flux

• Création des métadonnées pour représenter bases de données, fichiers et répertoires
• Notion de datastore, structures sources, structures cibles et connexions
• Rétro-ingénierie des schémas et vérification des propriétés techniques
• Création d’un mapping simple entre une source fichier et une table cible
• Exécution locale, lecture des journaux et contrôle du résultat de chargement
• Atelier pratique : créer un projet, importer les métadonnées d’une source et charger un fichier CSV dans une base de données locale.

[Jour 2 – Matin]

Conception des mappings de transformation

• Structure d’un mapping et cycle de conception d’un flux de données
• Correspondance des colonnes, typage, conversions et expressions de transformation
• Mise en œuvre des filtres pour sélectionner les données utiles
• Utilisation des jointures pour consolider plusieurs sources de données
• Gestion des contraintes d’intégrité et des règles de qualité dans les mappings

[Jour 2 – Après-midi]

Qualité des données et gestion des rejets

• Identification des erreurs fonctionnelles et techniques lors des chargements
• Configuration de la gestion des rejets et des tables de contrôle
• Utilisation des stages pour séparer les étapes de préparation et de chargement
• Conception de flux incrémentaux et prise en compte des doublons
• Lecture des statistiques d’exécution et analyse des anomalies de données
• Atelier pratique : construire un mapping avec jointure, filtrage, transformation et redirection des enregistrements rejetés.

[Jour 3 – Matin]

Orchestration et exécution des traitements

• Rôle des processus dans l orchestration des mappings et des traitements
• Génération d’actions à partir des mappings et paramétrage de leur exécution
• Enchaînement des tâches, conditions, variables et gestion des dépendances
• Planification logique des chargements d’un datamart
• Exploitation des logs du Runtime pour diagnostiquer une erreur d’exécution

[Jour 3 – Après-midi]

Déploiement et industrialisation des flux

• Préparation des livraisons et gestion des versions des projets d’intégration
• Déploiement des métadonnées, mappings et processus vers un environnement Runtime
• Principes de configuration des environnements de développement, recette et production
• Supervision des exécutions avec xDI Analytics et suivi des incidents
• Bonnes pratiques de performance, de sécurité des connexions et de maintenance
• Atelier pratique : finaliser un flux complet, générer son processus, l’exécuter sur un Runtime et analyser son journal de traitement.