Як виконати будь-яку команду, що редагує її файл (аргумент) "на місці", використовуючи bash?

У мене є файл temp.txt, який я хочу сортувати за допомогою sortкоманди в bash.

Я хочу, щоб відсортовані результати замінили вихідний файл.

Наприклад, це не працює (я отримую порожній файл):

sortx temp.txt > temp.txt

Чи можна це зробити в один рядок, не вдаючись до копіювання до тимчасових файлів?

EDIT: Цей -oваріант дуже класний sort. Я використовував sortу своєму питанні як приклад. У мене виникають ті ж проблеми з іншими командами:

uniq temp.txt > temp.txt.

Чи є краще загальне рішення?

sort temp.txt -o temp.txt

sortПовинен бачити все вхідні дані, перш ніж він може почати виведення. З цієї причини sortпрограма може легко запропонувати можливість змінити файл на місці:

sort temp.txt -o temp.txt

Зокрема, документація GNUsort говорить:

Як правило, сортування зчитує всі вхідні дані перед відкриттям вихідного файлу, тож ви можете сміливо сортувати файл на місці, використовуючи команди типу sort -o F Fта та cat F | sort -o F. Однак за sortдопомогою --merge( -m) можна відкрити вихідний файл перед читанням усіх вхідних даних, тому команда на зразок cat F | sort -m -o F - Gне є безпечною, оскільки сортування може почати писати, Fперш ніж catбуде прочитано її.

Хоча в документації BSD sortсказано:

Якщо вихідний файл [the] є одним із вхідних файлів, відсортуйте його до тимчасового файлу, перш ніж сортувати та записувати вихід у вихідний файл.

Такі команди, як, наприклад, uniqможуть почати записувати вихід, перш ніж закінчити читання вводу. Ці команди, як правило, не підтримують редагування на місці (і їм буде складніше підтримувати цю функцію).

Зазвичай ви обходите це тимчасовим файлом, або якщо ви абсолютно хочете уникати проміжного файлу, ви можете використовувати буфер для зберігання повного результату перед його написанням. Наприклад, за допомогою perl:

uniq temp.txt | perl -e 'undef $/; $_ = <>; open(OUT,">temp.txt"); print OUT;'

Тут частина Perl зчитує повний вихід з uniqзмінної, $_а потім перезаписує вихідний файл із цими даними. Ви можете зробити те ж саме на мові сценаріїв, яку ви обрали, можливо, навіть на Bash. Але зауважте, що для зберігання всього файлу знадобиться достатньо пам'яті, це не доцільно при роботі з великими файлами.

Ось більш загальний підхід, що працює з uniq, сортування та що-небудь ще.

{ rm file && uniq > file; } < file

Коментар Тобу щодо губки вимагає відповіді сам по собі.

Цитувати з домашньої сторінки moreutils :

Напевно, найзагальнішим інструментом у моторних утилітах поки що є губка (1), яка дозволяє робити такі дії:

% sed "s/root/toor/" /etc/passwd | grep -v joey | sponge /etc/passwd

Однак spongeстраждає від тієї ж проблеми, яку тут коментує Стів Джессоп. Якщо будь-яка з команд у конвеєрі перед тим, як spongeне вдасться, тоді оригінальний файл буде записаний.

$ mistyped_command my-important-file | sponge my-important-file
mistyped-command: command not found

Ух-о, my-important-fileпішло.

Ось один рядок:

sort temp.txt > temp.txt.sort && mv temp.txt.sort temp.txt

Технічно немає копіювання у тимчасовий файл, і команда 'mv' повинна бути миттєвою.

Мені подобається sort file -o fileвідповідь, але я не хочу вводити одне й те саме ім’я два рази.

Використання розширення історії BASH :

$ sort file -o !#^

під час натискання схоплює перший аргумент поточного рядка enter.

Унікальний сортування на місці:

$ sort -u -o file !#$

схоплює останній аргумент у поточному рядку.

Багато хто згадував варіант -o . Ось частина чоловічої сторінки.

На сторінці чоловіка:

   -o output-file
          Write output to output-file instead of to the  standard  output.
          If  output-file  is  one of the input files, sort copies it to a
          temporary file before sorting and writing the output to  output-
          file.

Це може бути обмежено пам'яттю, але ви можете використовувати awk для зберігання проміжних даних у пам'яті, а потім записуйте їх назад.

uniq temp.txt | awk '{line[i++] = $0}END{for(j=0;j<i;j++){print line[j]}}' > temp.txt

Альтернатива тому, що spongeє більш поширеним sed:

sed -ni r<(command file) file

Вона працює для будь-якої команди ( sort, uniq, tac...) і використовує дуже добре відомі sed«s -iваріант (редагувати файли на місці).

Попередження: Спробуйте command fileспочатку, оскільки редагування файлів на місці не є безпечним за своєю природою.

Пояснення

Під - перше, ви говорите , sedне друкувати (оригінальна) лінії ( -nопція ), а також за допомогою sed«s rкоманди і bash» s Підстановка процесів , що генерується контент шляхом <(command file)буде вихід збережений на місці .

Зробити речі ще простішими

Ви можете зафіксувати це рішення у функції:

ip_cmd() { # in place command
    CMD=${1:?You must specify a command}
    FILE=${2:?You must specify a file}
    sed -ni r<("$CMD" "$FILE") "$FILE"
}

Приклад

$ cat file
d
b
c
b
a

$ ip_cmd sort file
$ cat file
a
b
b
c
d

$ ip_cmd uniq file
$ cat file
a
b
c
d

$ ip_cmd tac file
$ cat file
d
c
b
a

$ ip_cmd
bash: 1: You must specify a command
$ ip_cmd uniq
bash: 2: You must specify a file

Використовуйте аргумент --output=або-o

Щойно спробував на FreeBSD:

sort temp.txt -otemp.txt

Щоб додати uniqможливості, які недоліки є:

sort inputfile | uniq | sort -o inputfile

Читайте на неінтерактивному редактора ex.

Якщо ви наполягаєте на використанні sortпрограми, вам доведеться використовувати проміжний файл - я не думаю, sortщо є можливість сортування в пам'яті. Будь-який інший трюк зі stdin / stdout не вдасться, якщо ви не зможете гарантувати, що розмір буфера для stdin сорту досить великий, щоб вмістити весь файл.

Редагувати: сором мені. sort temp.txt -o temp.txtпрацює чудово.

Ще одне рішення:

uniq file 1<> file