Consolidation de fichiers

La consolidation de fichiers permet de créer un modèle qui stockera, dans une même table de l'entrepôt de données, les données provenant de différents fichiers situés dans un même répertoire.

Le filtre des fichiers à prendre en compte pour la consolidation s'effectue en utilisant la syntaxe des masques de l'explorateur de fichier Windows :

  • Etoile (*) : n'importe quelle suite de caractères

  • Point d’interrogation "?" : n'importe quel caractère

Seuls les fichiers situés directement dans le dossier sont analysés, les sous-dossiers sont ignorés.

Les fichiers récupérés doivent avoir la même structure :

  • Pour des fichiers texte :

    • Les même colonnes

    • Un entête, s'il est défini

    • Les mêmes délimiteurs, séparateurs et caractères d'échappement

  • Pour des fichiers Excel :

    • La même zone qui possède les données en fonction de la configuration souhaitée :

      • Adresse absolue des données (nom de feuille, et adresse)

      • Nom de la zone qui possède les données

    • La même structure de données :

      • Tableau croisé ou listing

      • Les mêmes champs, placés aux mêmes endroits et dans le même ordre (ligne, colonne, indicateur)

Lors de la configuration, seul le premier fichier (par ordre alphabétique) est utilisé pour l'analyse de la structure.

Les modèles fichiers exploitant la consolidation de fichiers :

  • Sont obligatoirement chargés dans l'entrepôt de données (pas de modèles temps réel)
  • Doivent être accessibles par le service par un chemin réseau (ils ne peuvent pas être stockés dans le dossier "Data" du projet)
ghostghostghostghostghost
loading table of contents...