Comment gérer les virgules dans un fichier CSV en cours de lecture par Bash Script

en raison de la version légèrement dépassée de awk code> sur mon système et une préférence personnelle à coller à un script Bash, je suis arrivé une solution légèrement différente.

J'ai produit une utilité Script basé sur Ce blog post qui analyse le fichier CSV et Remplace les délimiteurs avec un délimiteur de votre choix afin que la sortie puisse être capturée et utilisée pour traiter facilement les données. Le script respecte les chaînes citées et les virgules intégrées, mais retirera les citations doubles qu'il trouve et ne fonctionnera pas avec des citations doubles évasées dans les champs. P>

#!/bin/bash

input=$1
delimiter=$2

if [ -z "$input" ];
then
    echo "Input file must be passed as an argument!"
    exit 98
fi

if ! [ -f $input ] || ! [ -e $input ];
then
    echo "Input file '"$input"' doesn't exist!"
    exit 99
fi

if [ -z "$delimiter" ];
then
    echo "Delimiter character must be passed as an argument!"
    exit 98
fi

gawk '{
    c=0
    $0=$0","                                   # yes, cheating
    while($0) {
        delimiter=""
        if (c++ > 0) # Evaluate and then increment c
        {
            delimiter="'$delimiter'"
        }

        match($0,/ *"[^"]*" *,|[^,]*,/)
        s=substr($0,RSTART,RLENGTH)             # save what matched in f
        gsub(/^ *"?|"? *,$/,"",s)               # remove extra stuff
        printf (delimiter s)
        $0=substr($0,RLENGTH+1)                 # "consume" what matched
    }
    printf ("\n")
}' $input

Si vous pouvez tolérer que les citations environnantes persistent dans la sortie, vous pouvez utiliser un petit script que j'ai écrit appelé CSVQuote pour activer AWK et couper (et d'autres outils de texte UNIX) pour gérer correctement les champs cités qui contiennent des virgules. Vous enveloppez la commande comme ceci: xxx

voir https://github.com/ dbro / csvquote pour le code et la documentation

Utilisation de la solution de Dimitire (merci pour cela) J'ai remarqué que son programme ignore les champs vides.

Voici le correctif: P>

awk '{ 
 for (i = 0; ++i <= NF;) {
   substr($i, 1, 1) == "\"" && 
     $i = substr($i, 2, length($i) - 2)
   printf "[%s]%s", $i, (i < NF ? OFS : RS)
    }   
 }' FPAT='([^,]*)|("[^"]+")' infile