Bonjour,

Dans le cadre de l'alimentation d'un DataWarehouse, je rencontre un problème de performance pour alimenter une des tables de faits.

L'alimentation hebdomadaire, via un ETL (Business Data Integrator) insère en moyenne dans l’une de ces tables plus de 3 millions d'enregistrements. L'ETL génère des ordres Insert avec un commit toutes les 1000 enregistrements et le traitement a une durée de 75 minutes en moyenne pour l’alimentation de cette table.

Afin d'optimiser ce traitement, nous avons décidé de ne plus utiliser les ordres Insert mais d'utiliser la fonction COPY :
COPY TO table_ods puis COPY FROM table_faits.
L'insertion des 3 millions d'enregistrement est descendue à 6 minutes les premières semaines, puis est remonté à 60 minutes (pour le copy from). La seule évolution apporté à la table de faits est l'ajout d'un index très précieux pour les performances des requêtes BO. Ce qui monte à 2 le nombre d'index sur cette table.

En supprimant l'index nouvellement créé, l'insertion des 3 millions d'enregistrement est redescendue à 6 minutes.

L'objectif de l'utilisation de la fonction COPY est de diminuer les temps d'alimentation du DataWarehouse puis de générer les requêtes BO dans la foulée pour les mettre à disposition des utilisateurs en début de matinée.

Peut-on désactiver la mise à jour des index d'une table le temps de l'alimenter et ensuite mettre à jour les index ?

La suppression/recréation des index sur cette table ne me convient pas car leur création met plusieurs heures.

J'espère avoir été clair et je vous remercie par avance pour vos suggestions.