19 Apr
2021
19 Apr
'21
10:18 a.m.
Message posté par : Lison94
----------------------------------------
Bonjour à tous,
Je souhaite importer dans ma BDD postgis, un tableau Excel. Pour cela je l'ai
enregistré en csv dans un fichier où j'ai ouvert les autorisation à "Tout le
monde". Ensuite, via pgadmin, j'ai créé une nouvelle table et j'utilise
l'outil import csv.
Seulement cela ne fonctionne pas j'obtiens un exit code 1 et je ne comprends pas
pourquoi..
Auriez-vous des explications à mon problème ?
Merci par avance :)
Lison
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=342491#p342491
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
19 Apr
19 Apr
10:37 a.m.
Message posté par : Lison94
----------------------------------------
Si je tape :
copy "2_risques_environnement_et_energie".nrj_potentiel_solaire_cnr_ccrc
from 'xxx.csv'
DELIMITER ';'
CSV HEADER;
J'ai ce retour :
ERROR: could not open file "xxx.csv" for reading: No such file or directory
HINT: COPY FROM instructs the PostgreSQL server process to read a file. You may want a
client-side facility such as psql's \copy.
SQL state: 58P01
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=342493#p342493
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
10:42 a.m.
Message posté par : Nicolas Ribot
----------------------------------------
-----------------
Lison94 écrit :
Si je tape :
copy "2_risques_environnement_et_energie".nrj_potentiel_solaire_cnr_ccrc
from 'xxx.csv'
DELIMITER ';'
CSV HEADER;
J'ai ce retour :
ERROR: could not open file "xxx.csv" for reading: No such file or directory
HINT: COPY FROM instructs the PostgreSQL server process to read a file. You may want a
client-side facility such as psql's \copy.
SQL state: 58P01
-----------------
Il faut mettre le chemin complet du fichier xxx.csv, sinon postgres ne sait pas ou le
trouver.
Et le message vous dit bien que le serveur postgres cherche le fichier sur localement sur
la machine serveur, pas sur la machine cliente.
Nico
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=342495#p342495
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
11:02 a.m.
Message posté par : Nicolas Ribot
----------------------------------------
\COPY est une commande propre au client PSQL.
Vous devez surement l'avoir installé si vous avez une BD postgresql locale, sinon peut
etre pgAdmin livre un client psql (sinon le plus simple est d'installer une instance
PG sur votre machine pour avoir le client. ca permet également de faire des tests postgres
sans toucher au serveur ;) )
Nicolas
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=342501#p342501
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
11:49 a.m.
Message posté par : Nicolas Ribot
----------------------------------------
cela indique que le CSV contient plus de colonnes que la table de destination.
il faut checker ces colonnes csv et faire en sorte que la table ait les mêmes colonnes, ou
alors préciser les colonnes de la table dans la commande copy
copy TABLE (col1, col2, ...) from '....';
Nicolas
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=342508#p342508
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
12:57 p.m.
Message posté par : Nicolas Ribot
----------------------------------------
Là, ca veut peut etre dire que le séparateur choisi (;) n'est pas le bon et qu'une
valeur contient ce séparateur: ca décale alors la lecture des données.
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=342512#p342512
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
2:03 p.m.
Message posté par : Lison94
----------------------------------------
C'est bon j'ai réussi j'ai trouvé le SQL SHELL merci beaucoup Nicolas !!
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=342518#p342518
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
7 Jul
7 Jul
1:47 p.m.
Message posté par : Nicolas Ribot
----------------------------------------
Bonjour,
Oui, il y a des outils qui font ça, si le CSV contient un header listant les colonnes.
(GDAL/OGR: https://gdal.org/drivers/vector/csv.html#vector-csv, datagrip, surement
DBeaver)
Nicolas
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=344795#p344795
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
13 Sep
13 Sep
6:54 p.m.
Message posté par : antosansh
----------------------------------------
-----------------
Lison94 écrit :
-----------------
Nicolas Ribot écrit :
\COPY est une commande propre au client PSQL.
Vous devez surement l'avoir installé si vous avez une BD postgresql locale, sinon peut
etre pgAdmin livre un client psql (sinon le plus simple est d'installer une instance
PG sur votre machine pour avoir le client. ca permet également de faire des tests postgres
sans toucher au serveur ;) )
Nicolas
-----------------
ok j'ai utilisé une pg 13.
Voila le résultat obtenu suite à la commande passée (je mets des x pour les données
confidentiels) :
ERREUR: données supplémentaires après la dernière colonne attendue
CONTEXTE : COPY test, ligne 2 : « xxx;Cre;MAD;0,40;4 tennis;4 r roland garros;44.xxx ,
4.xxx»
-----------------
Bonjour
Je n'ai aucune formation en base de données. J'ai appris ça sur le tas. Je
m'en sortais assez bien puis, n'ayant plus besoin d'en gérer, je n'en ai
plus fait pendant 6 ans.
A présent, je m'y replonge. J'ai ressorti mes vieux fichiers, j'ai réinstallé
pgAdmin 4. Et... surprise! Ca ne fonctionne plus comme avant!
Je me retrouve coincé exactement comme mentionné précédement mais je ne comprends pas du
tout l'explication. Est-ce que quelqu'un pourrait me traduire?
Avant, j'importais mon fichier csv depuis mon ordinateur sans soucis. Là si je
comprends bien, je dois passer par un serveur??!
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=362545#p362545
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
23 Sep
23 Sep
11:22 a.m.
Message posté par : Nicolas Ribot
----------------------------------------
Bonjour,
Une précision en plus du message de Mathieu:
Lisez bien le message d'erreur, il donne souvent de bonnes indications concernant le
problème:
ERREUR: données supplémentaires après la dernière colonne attendue
CONTEXTE : COPY test, ligne 2 : « xxx;Cre;MAD;0,40;4 tennis;4 r roland garros;44.xxx ,
4.xxx»
• L'erreur survient ligne 2, juste après le header (je suppose que votre csv a un
header) et concerne la ligne entière.
• "données supplémentaires après la dernière colonne attendue": et les données
supplémentaires sont en fait une ligne complète: ca sent le problème de séparateur lors de
la commande copy: votre fichier est séparé par des ";" et pas des ","
comme par défaut dans les CSV.
Il faut préciser le delimiter dans la commande copy:
-----------------
Code :
copy matable from 'toto.csv' with (header true, format csv, delimiter
';');
-----------------
Nicolas
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=362732#p362732
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
19 Apr
19 Apr
10:40 a.m.
Message posté par : Nicolas Ribot
----------------------------------------
Bonjour,
Le problème de le faire avec pgAdmin est que vous n'avez pas le message d'erreur
renvoyé par postgres, mais juste le message pgAdmin "erreur exit 1".
Il est plus simple de le faire avec psql directement, au moins les messages d'erreurs
sont clairs et vous savez ce que pose pb.
Quelques éléments sur COPY:
• il faut lancer la commande en tant que superuser
• Si vous lancez COPY .... from ..., il faut que le fichier en question soit SUR LE
SERVEUR postgres, pas sur le client.
• Si le fichier est sur votre machine et que le serveur est sur une autre machine, il faut
utiliser la commande \COPY, depuis le client PSQL Ou alors copier le fichier depuis votre
machine sur le serveur, dans un répertoire accessible par l'utilisateur postgres, puis
lancer la commande COPY en mettant le chemin complet de ce fichier sur le serveur.
Nicolas
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=342494#p342494
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
10:52 a.m.
Message posté par : Lison94
----------------------------------------
-----------------
Nicolas Ribot écrit :
-----------------
Lison94 écrit :
Si je tape :
copy "2_risques_environnement_et_energie".nrj_potentiel_solaire_cnr_ccrc
from 'xxx.csv'
DELIMITER ';'
CSV HEADER;
J'ai ce retour :
ERROR: could not open file "xxx.csv" for reading: No such file or directory
HINT: COPY FROM instructs the PostgreSQL server process to read a file. You may want a
client-side facility such as psql's \copy.
SQL state: 58P01
-----------------
Il faut mettre le chemin complet du fichier xxx.csv, sinon postgres ne sait pas ou le
trouver.
Et le message vous dit bien que le serveur postgres cherche le fichier sur localement sur
la machine serveur, pas sur la machine cliente.
Nico
-----------------
Merci pour votre réponse :)
Oui j'ai mis le chemin complet, je l'ai pas noté ici pour des raisons de
sécurité.
Lorsque je tape :
\COPY "2_risques_environnement_et_energie".nrj_potentiel_solaire_cnr_ccrc
from 'C:\Users\llesieur\Desktop\export\VS - Potentiel solaire CRUSSOL - MAJ.csv'
DELIMITER ';'
CSV HEADER;
Il ne reconnait pas la cmd \copy..
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=342497#p342497
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
11:24 a.m.
Message posté par : Lison94
----------------------------------------
-----------------
Nicolas Ribot écrit :
\COPY est une commande propre au client PSQL.
Vous devez surement l'avoir installé si vous avez une BD postgresql locale, sinon peut
etre pgAdmin livre un client psql (sinon le plus simple est d'installer une instance
PG sur votre machine pour avoir le client. ca permet également de faire des tests postgres
sans toucher au serveur ;) )
Nicolas
-----------------
ok j'ai utilisé une pg 13.
Voila le résultat obtenu suite à la commande passée (je mets des x pour les données
confidentiels) :
ERREUR: données supplémentaires après la dernière colonne attendue
CONTEXTE : COPY test, ligne 2 : « xxx;Cre;MAD;0,40;4 tennis;4 r roland garros;44.xxx ,
4.xxx»
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=342506#p342506
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
12:37 p.m.
Message posté par : Lison94
----------------------------------------
Ok j'ai bien mis le même nombre de champs que de colonnes. Maintenant j'ai une
autre erreur : données manquantes pour la colonne « Type ». Pourtant toutes les cellules
sont remplies.
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=342511#p342511
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
1:56 p.m.
Message posté par : Lison94
----------------------------------------
-----------------
Nicolas Ribot écrit :
Là, ca veut peut etre dire que le séparateur choisi (;) n'est pas le bon et qu'une
valeur contient ce séparateur: ca décale alors la lecture des données.
-----------------
Super ca fonctionne merci ! Maintenant je n'ai pas de client sql pour ce serveur
(lizmap), comment je peux me connecter via l'invite de commande ?
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=342516#p342516
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
7 Jul
7 Jul
11:51 a.m.
Message posté par : Lison94
----------------------------------------
Bonjour :) je me permets de revenir sur la question car je me demande : est il possible
d'intégrer un fichier csv dans une base postgis, sans avoir à créer tous les champ
avant ?
Merci :)
Lison
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=344789#p344789
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
4:24 p.m.
Message posté par : Lison94
----------------------------------------
Bonjour,
C'est parfait j'ai utilisé cette formule :
https://gist.github.com/chriswhong/067cb12d74fbb6297bdd657d1e4da00b
merci :)
Lison
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=344799#p344799
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
20 Sep
20 Sep
1:43 p.m.
Message posté par : Mathieu Denat
----------------------------------------
Bonjour,
PgAdmin est un client graphique.
Le client dont parle Nicolas est installé sur le serveur (mais il peut aussi être installé
sur le poste utilisateur).
Il est normalement installé par défaut avec l'installation du serveur posgreSQL.
Voir ici:
https://docs.postgresql.fr/current/app-psql.html
C'est depuis cette application qu'il faut lancer la commande \COPY.
Le CSV doit être sur le même serveur que celui où postgreSQL est installé.
Sinon la commande COPY ne trouvera pas le fichier.
----------------------------------------
Le message est situé https://georezo.net/forum/viewtopic.php?pid=362677#p362677
Pour y répondre : geobd(a)ml.georezo.net ou reply de votre messagerie
Pour vous désabonner connectez-vous sur le forum puis Profil / Abonnement
--
Association GeoRezo - le portail géomatique
https://georezo.net
748
days inactive
1635
days old
17 comments
1 participants
participants (1)
-
geobd＠georezo.net