Ideias e pensamentos sobre este mundinho e algo mais …

O poder dos unix’s

June 9th, 2008 Posted in Uncategorized

Imaginem que tem um ficheiro com mais de 65000 entradas em csv, separados por ;, a coluna 1 é o id, a coluna 2 a descrição, como é que apagam os dados repetidos?

Em qualquer sistema unix é tão fácil quanto isto:

cat nome_do_ficheiro.csv|sort -ruk 1n

Nota mental:
awk -F[\;] ‘{print $1,”;”,$2,”;”,$3,”;”,$4,”;”,$6,$7,$8,$9,$10,$11,$12,$13,$14,”;”,$15,”-”,$16,$17}’ todos_cp.txt > todos_cp_2.txt

acho que tenho estudar bem este awk.

Post a Comment