Linux: Як використовувати файл як вхід, так і вихід одночасно?

Я просто запустив наступне в баші:

uniq .bash_history > .bash_history

і мій файл історії закінчився абсолютно порожнім.

Я думаю, мені потрібен спосіб прочитати весь файл, перш ніж писати в нього. Як це робиться?

PS: Я, очевидно, думав використовувати тимчасовий файл, але шукаю більш елегантне рішення.

Я рекомендую використовувати spongeз moreutils . На сторінці сторінки:

DESCRIPTION
  sponge  reads  standard  input  and writes it out to the specified file. Unlike
  a shell redirect, sponge soaks up all its input before opening the output file.
  This allows for constructing pipelines that read from and write to the same 
  file.

Щоб застосувати це до своєї проблеми, спробуйте:

uniq .bash_history | sponge .bash_history

Я просто хотів зробити ще одну відповідь, яка проста і не використовує губку (тому що вона часто не входить у полегшене середовище).

echo "$(uniq .bash_history)" > .bash_history

повинні мати бажаний результат. Підскладок виконується до відкриття .bash_history для запису. Як пояснено у відповіді Філа Р, до моменту, коли .bash_history читається в оригінальній команді, вона вже скорочена оператором '>'.

Проблема полягає в тому, що ваша оболонка налаштовує конвеєр команд перед запуском команд. Це не питання "введення та виведення", це те, що вміст файлу вже вийшов до того, як uniq навіть запуститься. Це щось на зразок:

1. Оболонка відкриває >вихідний файл для запису, обрізаючи його
2. Оболонка встановлюється для того, щоб файл-дескриптор 1 (для stdout) використовувався для цього виводу
3. Оболонка виконує uniq, можливо, щось на зразок execlp ("uniq", "uniq", ".bash_history", NULL)
4. uniq працює, відкриває .bash_history і нічого там не знаходить

Існують різні рішення, включаючи редагування на місці та тимчасове використання файлів, про які згадують інші, але ключовим є розуміння проблеми, що насправді відбувається не так і чому.

Ще один трюк для цього, не використовуючи sponge, - це наступна команда:

{ rm .bash_history && uniq > .bash_history; } < .bash_history

Це один із чітів, описаних у чудовій статті редагування файлів на backreference.org «На місці» .

Він в основному відкриває файл для читання, після чого "видаляє" його. Однак насправді це не вилучено: є відкритий дескриптор файлу, який вказує на нього, і поки цей файл залишається відкритим, файл все ще існує. Потім він створює новий файл з такою ж назвою і записує до нього унікальні рядки.

Недолік цього рішення: Якщо uniqз якихось причин не вдасться, ваша історія не залишиться.

використовуйте губку з більш корисних речовин

uniq .bash_history | sponge .bash_history

Цей sedскрипт видаляє сусідні дублікати. За допомогою -iопції вона робить модифікацію на місці. Це з sed infoфайлу:

sed -i 'h;:b;$b;N;/^\(.*\)\n\1$/ {g;bb};$b;P;D' .bash_history

Як цікавий лайдак, sed також використовує темп-файл (це робиться саме для вас):

$ strace sed -i 's/foo/bar/g' foo    
open("foo", O_RDONLY|O_LARGEFILE)       = 3
...
open("./sedPmPv9z", O_RDWR|O_CREAT|O_EXCL|O_LARGEFILE, 0600) = 4
...
read(3, "foo\n"..., 4096)               = 4
write(4, "bar\n"..., 4)                 = 4
read(3, ""..., 4096)                    = 0
close(3)                                = 0
close(4)                                = 0
rename("./sedPmPv9z", "foo")            = 0
close(1)                                = 0
close(2)                                = 0

Опис:
тимчасовий файл ./sedPmPv9zстає FD 4, і fooфайли стає FD 3. Операції читання знаходяться на дескрипторі 3, і запис на дескрипторі 4 (файл TEMP). Потім файл foo перезаписується тимчасовим файлом у виклику перейменування.

Ще одне рішення:

uniq file 1<> líneas.txt

Тимчасовий файл - це майже все, якщо тільки ця команда не підтримує редагування місця ( uniqне - деякі seds do ( sed -i)).

Ви можете використовувати Vim в режимі Ex:

ex -sc '%!uniq' -cx .bash_history

1. % виберіть усі рядки

2. ! запустити команду

3. x зберегти і закрити

Ви також можете використовувати трійник, використовуючи вихідний вивід uniq:

uniq .bash_history | tee .bash_history