Короткий і портативний "приєднання" в командному рядку Unix

Як я можу об’єднати кілька рядків в один рядок із роздільником, де були символи нового рядка, уникаючи кінцевого роздільника та, за бажанням, ігноруючи порожні рядки?

Приклад. Розглянемо текстовий файл foo.txtіз трьома рядками:

foo
bar
baz

Бажаний результат:

foo,bar,baz

Команда, яку я використовую зараз:

tr '\n' ',' <foo.txt |sed 's/,$//g'

В ідеалі це було б приблизно так:

cat foo.txt |join ,

Що:

1. найбільш портативний, стислий, читабельний спосіб.
2. найбільш стислий спосіб із використанням нестандартних інструментів unix.

Звичайно, я міг щось написати, або просто використати псевдонім. Але мені цікаво знати варіанти.

Можливо, трохи дивно, pasteце хороший спосіб зробити це:

paste -s -d","

Це не стосуватиметься порожніх рядків, про які ви згадали. Для цього grepспочатку прокладіть текст :

grep -v '^$' | paste -s -d"," -

Цей sedоднорядковий рядок повинен працювати -

sed -e :a -e 'N;s/\n/,/;ba' file

Тест:

[jaypal:~/Temp] cat file
foo
bar
baz

[jaypal:~/Temp] sed -e :a -e 'N;s/\n/,/;ba' file
foo,bar,baz

Щоб обробляти порожні рядки, ви можете видалити порожні рядки та направити їх до вищевказаного однокласника.

sed -e '/^$/d' file | sed -e :a -e 'N;s/\n/,/;ba'

Як щодо використання ксарг?

для вашої справи

$ cat foo.txt | sed 's/$/, /' | xargs

Будьте обережні щодо граничної довжини введення команди xargs. (Це означає, що дуже довгий вхідний файл не може бути оброблений цим.)

Perl:

cat data.txt | perl -pe 'if(!eof){chomp;$_.=","}'

або ще коротший і швидший, на диво:

cat data.txt | perl -pe 'if(!eof){s/\n/,/}'

або, якщо ви хочете:

cat data.txt | perl -pe 's/\n/,/ unless eof'

Для розваги, ось всебічне рішення

IFS=$'\n' read -r -d '' -a data < foo.txt ; ( IFS=, ; echo "${data[*]}" ; )

Ви можете використовувати printfзамістьecho якщо кінцевий рядок є проблемою.

Це працює шляхом встановлення IFSроздільників, які readбудуть розділятися, лише на новий рядок, а не на інші пробіли, а потім повідомляти, readщо не слід припиняти читання, поки не досягне значення a nul, замість нового рядка, який він зазвичай використовує, і додати кожен прочитаний елемент у масив ( -a) даних. Потім, в субоболочке так, щоб не затирати IFSінтерактивну оболонку, ми встановлюємо , IFSщоб ,і розширити масив *, який обмежує кожен елемент масиву з першим символомIFS

Мені потрібно було зробити що - щось подібне, друк , розділених комами список полів з файлу, і був щасливий з пилу STDOUT до xargsі ruby, наприклад , так:

cat data.txt | cut -f 16 -d ' ' | grep -o "\d\+" | xargs ruby -e "puts ARGV.join(', ')"

У мене був файл журналу, де деякі дані були розбиті на кілька рядків. Коли це сталося, останнім символом першого рядка була крапка з комою (;). Я приєднався до цих рядків, використовуючи такі команди:

for LINE in 'cat $FILE | tr -s " " "|"'
do
    if [ $(echo $LINE | egrep ";$") ]
    then
        echo "$LINE\c" | tr -s "|" " " >> $MYFILE
    else
        echo "$LINE" | tr -s "|" " " >> $MYFILE
    fi
done

Результат - файл, де рядки, розділені в журналі, були одним рядком у моєму новому файлі.

Простий спосіб об’єднати рядки за допомогою простору на місці ex(також ігноруючи порожні рядки), використовуйте:

ex +%j -cwq foo.txt

Якщо ви хочете надрукувати результати у стандартному виданні, спробуйте:

ex +%j +%p -scq! foo.txt

Щоб об'єднати рядки без пробілів, використовуйте +%j!замість+%j .

Якщо використовувати різні роздільники, це трохи складніше:

ex +"g/^$/d" +"%s/\n/_/e" +%p -scq! foo.txt

де g/^$/d(або v/\S/d) видаляє порожні рядки і s/\n/_/є заміною, яка в основному працює так само, як і використання sed, але для всіх рядків ( %). Після завершення розбору надрукуйте буфер ( %p). І нарешті, -cq!виконуючи q!команду vi , яка в основному завершує роботу без збереження (-s полягає у приглушенні виводу).

Зверніть увагу, що exеквівалентноvi -e .

Цей метод досить портативний, оскільки більшість Linux / Unix за замовчуванням постачаються з ex/ vi. І він є більш сумісним, ніж використання, sedде параметр in-place ( -i) не є стандартним розширенням, а сам утиліта більш орієнтований на потік, тому він не такий портативний.

Моя відповідь:

awk '{printf "%s", ","$0}' foo.txt

printfдостатньо. Нам не потрібно -F"\n"міняти роздільник поля.