Bonjour à tous,

Je voulais poser une question concernant l'utilisation de la commande COPY (à partir d'une session psql).

Environnement:

OS: Windows 10 (64 bits)
PostgreSQL: 10

J'utilise cette commande afin de charger des fichier CSV très volumineux dans un certain nombre de tables dans ma base. Le problème c'est que depuis plusieurs jours, apparemment il y a des données erronées qui sont rejetées par les contraintes d'intégrité définies sur les tables et dès le premier rejet, PostgreSQL fait un ROLLBACK complet. C'est-ce qu'il est d'ailleurs écrit dans la documentation en ligne:
https://www.postgresql.org/docs/10/sql-copy.html

Je n'ai pas la possibilité de nettoyer les fichiers avant le chargement dans PostgreSQL et d'ailleurs ce n'est pas le but. Au contraire, nous souhaitons pouvoir rassembler les lignes rejetées en un seul fichier et l'envoyer à l'équipe de développement, qui est responsable de la production de ces fichiers, afin de leur montrer le problème et donc faciliter/accélérer le travail d'analyse de ces anomalies.

Avec Oracle, je n'aurai aucune difficulté, le programme SQL*Loader permet de récupérer facilement les lignes rejetées dans un fichier, tout en continuant à charger les données ayant le bon format dans les tables. Comment je peux faire pour avoir le même résultat sur PostgreSQL? C'est-à-dire au lieu d'un ROLLBACK, écrire les données rejetées dans un fichier? Le problème me paraît un grand classique notamment dans le cadre des missions de la reprise de données où parfois on trouve un peu tout dans les fichiers. Je serai vraiment étonné si une solution similaire/équivalent à SQL*Loader n'existe pas pour régler le même problème sur PostgreSQL.

Merci d'avance,

Bonjour,

Je voulais poser une question concernant les plans d'exécution dans PostgreSQL. En fait au chapitre 14.1 de la documentation en ligne (14.1. Using EXPLAIN) il y a la présentation des éléments liés à ce sujet comme par exemple différents types de scan et les coûts, etc.

Ce que je voulais savoir, c'est l'ordre de la lecture de l'arbre d'un plan d'exécution qui est imprimé sous forme d'une table quand l'on fait un EXPLAIN. Sous oracle, voici comment je procède:

Dans la table du plan d'exécution, je regarde la ligne la plus décalée à droite et s'il y en a plusieurs qui sont au même niveau le plus décalées à droite alors je prends la première (en lisant les lignes du haut vers le bas). J'évalue l'opération. Ensuite j'évalue son parent et je répète exactement la même procédure jusqu'à épuiser l'ensemble des opérations (= noeuds de l'arbre du plan d'exécution) et arriver finalement à la première ligne qui est la requête principale.

Ma question est donc la suivante: est-ce que la lecture du plan d'exécution sous PostgreSQL, se fait de la même manière décrite ci-dessus? Car dans la documentation je n'ai rien trouvé concernant ce sujet.

Merci d'avance,