Pourquoi sed ne produit-il aucun texte ?

Apparemment, le fichier est au format UTF-16, mais la plupart des outils de manipulation de texte de MacOS ne savent pas comment travailler avec ce format et brouillent les fichiers s'ils essaient. Le format UTF-16 utilise deux octets par caractère ; pour les caractères ASCII simples tels que " Il s'agit du code ASCII d'un seul octet suivi d'un octet nul. Voici ce que cela donne tr -d \" supprimera le premier octet, laissant un octet nul et décalant tout le reste du fichier d'un octet.

Je pense qu'il est possible de faire fonctionner perl en UTF-16 (voir ici ), mais je ne suis pas sûr des tenants et aboutissants. Ce qui suit pourrait (sur la base de cette ):

perl -pe 'BEGIN { binmode $_, ":raw:encoding(UTF-16LE)" for *STDIN, *STDOUT }; s/"//g;' infile >outfile

Vous pouvez également le convertir en UTF-8 et inversement avec

iconv -f UTF-16LE -t UTF-8 infile | tr -d \" | iconv -f UTF-8 -t UTF-16LE >outfile

Si la sortie n'a pas besoin d'être en UTF-16, vous pouvez laisser la dernière valeur de iconv de l'extérieur.