{"id":199,"date":"2018-11-12T16:05:54","date_gmt":"2018-11-12T15:05:54","guid":{"rendered":"https:\/\/sigeo.cerege.fr\/?p=199"},"modified":"2020-09-24T16:54:16","modified_gmt":"2020-09-24T14:54:16","slug":"awk-traitement-des-fichiers-texte","status":"publish","type":"post","link":"https:\/\/sigeo.cerege.fr\/?p=199","title":{"rendered":"AWK traitement de fichier texte"},"content":{"rendered":"

La commande unix awk<\/em><\/strong> permet des manipulations avanc\u00e9es sur les cha\u00eenes de caract\u00e8res.<\/p>\n

awk [options] [programme] [fichier]<\/code><\/p>\n

L’option la plus courante est -F : s\u00e9parateur de champ<\/p>\n

La structure du programme est la suivante :
'motif1 { action1 }
\nmotif2 { action2 } \u2026'<\/code><\/p>\n

motif (en anglais pattern) est la condition pour r\u00e9aliser l’action. On utilise le plus souvent une expression r\u00e9guli\u00e8re.<\/p>\n

Exemple 1 : condition<\/h3>\n

avec un fichier ASCII “input.xyz”<\/em> de la forme suivante (donn\u00e9es Lidar) :<\/p>\n

13.83535621 42.12214528 401.940 32 2\n13.83534713 42.12213870 401.870 28 2\n13.83533818 42.12213222 401.670 33 2\n13.83532879 42.12211645 401.950 30 1\n13.83533763 42.12212258 401.630 28 2\n13.83534682 42.12212933 401.830 29 2\n13.83535625 42.12213609 402.250 25 1<\/pre>\n
on veut ne conserver que les lignes o\u00f9 la 5\u00e8me colonne est diff\u00e9rente de 1<\/p>\n
awk '{ if ( $5!=1 ) print $0 }' input.xyz > output.xyz<\/code><\/p>\n
et voil\u00e0! c’est tout<\/p>\n
Exemple 2 : utilisation dans un script<\/h3>\n
on a un fichier texte avec diff\u00e9rents espacements entre colonne, parfois un espace, parfois plusieurs. C’est le cas des fichiers en sortie du logiciel Circ\u00e9 IGN qui sont formatt\u00e9s vraiment bizarrement. Il contiennent parfois un et parfois plein d’espaces entre les champs, et des lignes d’ent\u00eate qui commencent par *! , voici un extrait d’un fichier en sortie de Circ\u00e9.<\/p>\n
*!COORDONN\u00c9ES: projet\u00e9es\n*!ELLIPSO\u00cfDE: GRS 1980\n*!PROJECTION: LAMBERT-93\n*!REPERE VERTICAL: IGN69\n*!\n*! id E N H geod.prec. vert.prec.\npoint1 830488.865    6252042.364 0.558 -1.167384     542.6 no info 5 \/ 10 cm\npoint2 831546.415    6251863.871 6.043 -1.176810     544.3 no info 5 \/ 10 cm<\/pre>\n
Voici la manip pour reformatter cela simplement avec awk<\/em> au sein d’un script.<\/p>\n
#! \/bin\/bash<\/code><\/p>\n
awk '$1!~\/*!\/ {$1=$1;print $0}' OFS=, > out.csv<\/code><\/p>\n
pour utiliser le script, on tape simplement: cat input.txt | .\/script.sh<\/code><\/p>\n
encore une fois, c’est tout!<\/p>\n
Quelques explications :<\/strong><\/p>\n