Унікальне сортування: перенаправлення виводу на той самий файл

Чи є якийсь короткий спосіб зберегти вихідний патрубок у той самий файл, який обробляється. Наприклад, саме цим я і займаюся

$ cat filename | sort | uniq > result
$ rm -f filename
$ mv result filename

Мені було цікаво, чи існує спосіб зробити це лише одним рядком (не додаючи ці команди за допомогою &&)

Це не шлях, а щоб отримати уявлення

$ cat filename | sort | uniq > filename

Ви можете використовувати spongeз пакету moreutils :

LC_ALL=C sort -u filename | sponge filename

Вам також не потрібна труба uniq, оскільки коли при сортуванні sortє -uможливість унікальних ліній.

Зауважте, що в системі GNU з локалями UTF-8 sort -uабо sort | uniqне давали вам унікальних ліній, але перші з послідовності рядків, які сортують однакові в поточному мові.

$ printf '%b\n' '\U2460' '\U2461' | LC_ALL=en_US.utf8 sort | LC_ALL=en_US.utf8 uniq
①

дав тобі тільки ①. Зміна локалі на C форсувати порядок сортування на основі байтових значень:

$ export LC_ALL=C
$ printf '%b\n' '\U2460' '\U2461' | LC_ALL=C sort | LC_ALL=C uniq
①
②

Вам не потрібна додаткова команда, як catі, uniqа також без використання rmкоманд і mvкоманд для видалення та перейменування імені файлу. просто використовуйте просту команду.

sort -u filename -o filename

 -u, --unique
        with -c, check for strict ordering; without -c, output only  the
        first of an equal run

 -o, --output=FILE
        write result to FILE instead of standard output

Як це працює?

sortкоманда сортує ваше ім'я файлу та за допомогою -uпараметра видаляє з нього повторювані рядки. потім за допомогою -oпараметра записує вихід у той самий файл методом in place.

Ваш запропонований приклад (нижче) не працює, оскільки ви насправді одночасно читали та записували в той самий файл.

$ cat filename | sort | uniq > filename

Ідея з трубою або переадресацією полягає в тому, що команда з лівої та правої сторони кожної труби або перенаправлення виконується одночасно, паралельно. Команда праворуч обробляє інформацію, коли вона передається їй від команди зліва, в той час як команда зліва все ще виконується.

Для того, щоб ваш сценарій працював, команду, що читає з файлу, потрібно було б виконати до того, як розпочнеться команда, що записує у файл. Для того, щоб це працювало, вам потрібно спочатку перенаправити висновок у тимчасове місце розташування, після чого після завершення відправте його з тимчасового місця назад у файл.

Кращий спосіб зробити це в основному, як у попередньому прикладі, коли ви перенаправляєте на тимчасовий файл, а потім перейменовуєте цей файл у початковий (за винятком того, що вам не потрібно спочатку видаляти файл, оскільки переміщення видаляє будь-яку існуючу ціль) .

$ cat filename | sort | uniq > result
$ mv -f result filename

Ви також можете зберегти його в рядковій змінній, за винятком того, що працює лише тоді, коли даних достатньо мало, щоб одразу вписатись у пам'ять.

Ви можете використовувати teeкоманду:

sort -u filename | tee filename > /dev/null

teeКоманда зчитує дані зі стандартного вводу і записує в стандартний висновок і файли.

Ви можете використовувати Vim в режимі Ex:

ex -sc 'sort u|x' filename

1. sort u сортувати унікальний

2. x напишіть, чи були внесені зміни (вони були) та закрийте