Одночасно міняйте закінчення рядків та кодування файлу

У мене є кілька файлів із закінченнями рядків Windows та кодуванням latin-1, які мені потрібно перетворити на закінчення рядків Unix та utf-8.

Звичайно я можу

for file in ./*.csv; do
    sed s'/^M//' "$file" > "${file}.bak"
    iconv -f iso-8859-1 -t utf8 "${file}.bak" > "$file"
    rm "${file}.bak"
done

Але чи є загальнодоступний інструмент, який може робити обидві ці речі одночасно? Можливо, це не найефективніший спосіб. (Може бути, iconv?)

Я б вніс кілька незначних змін до вашого сценарію. Спочатку не використовуйте lsу своєму forциклі, використовуйте, *.csvтому що глобус буде обробляти символи та пробіли, що не друкуються, у іменах файлів. Замість того, щоб використовувати перенаправлення inplace in $file.bak. Якщо stringsце доступно у вашій системі, замініть sedна strings. І завжди пам’ятайте, щоб цитувати змінні.

    for file in *.csv
    do    sed 's/^M//' "$file" > "${file}.bak"
         #strings "$file" > "${file}.bak"
          iconv -f -iso-8859-1 -t utf8 "${file}.bak" > "$file"
          rm "${file}.bak"
    done