Як я можу прокласти трубу більш жорстко, а не прокладати?

У мене є програма, яка записує інформацію в stdoutі stderr, і мені потрібно grepпроаналізувати те, що стає більш складним , ігноруючи stdout .

Я, звичайно, можу це зробити в 2 етапи:

command > /dev/null 2> temp.file
grep 'something' temp.file

але я вважаю за краще мати можливість це робити без тимчасових файлів. Чи є якісь хитромудрі трубопроводи?

Перший перенаправлення stderr на stdout - труба; потім перенаправляємо stdout на /dev/null(не змінюючи, куди йде stderr):

command 2>&1 >/dev/null | grep 'something'

Детальніше про перенаправлення вводу / виводу у всій його різноманітності див. У розділі " Перенаправлення" у довідковому посібнику Bash.

Зауважте, що послідовність переадресацій вводу / виводу інтерпретується зліва направо, але труби встановлюються перед інтерпретацією переадресацій вводу / виводу. Дескриптори файлів, такі як 1 і 2, - це посилання на відкриті описи файлів. Операція 2>&1змушує дескриптор файлу 2 aka stderr посилатися на той самий опис відкритого файлу, на який в даний час посилається дескриптор файлу 1 aka stdout (див. dup2()І open()). Потім операція >/dev/nullзмінює дескриптор 1 файлу таким чином, що він посилається на відкритий опис файлу для /dev/null, але це не змінює факту, що дескриптор 2 файлу посилається на відкритий опис файлу, на який дескриптор 1 файлу спочатку вказував, а саме - на трубу.

Або для заміни результатів зі стандартної помилки та стандартного виводу на, використовуйте:

command 3>&1 1>&2 2>&3

Це створює новий дескриптор файлу (3) і призначає його тому ж самому місцю, що і 1 (стандартний вихід), потім призначає fd 1 (стандартний вихід) тому самому місці, що і fd 2 (стандартна помилка) і, нарешті, призначає fd 2 (стандартна помилка ) до того самого місця, що і fd 3 (стандартний вихід).

Стандартна помилка тепер доступна як стандартний вихід, а старий стандартний вихід зберігається в стандартній помилці. Це може бути надмірним, але, сподіваємось, це дає більше деталей щодо дескрипторів файлів Bash (для кожного процесу доступно дев'ять).

У Bash ви також можете перенаправити на підзарядку, використовуючи підстановку процесу :

command > >(stdlog pipe)  2> >(stderr pipe)

Для конкретного випадку:

command 2> >(grep 'something') >/dev/null

Поєднуючи найкращі з цих відповідей, якщо ви робите:

command 2> >(grep -v something 1>&2)

... тоді вся stdout зберігається як stdout і весь stderr зберігається як stderr, але ви не побачите жодних рядків у stderr, що містять рядок "щось".

Це має унікальну перевагу: не відміняти та не відкидати stdout та stderr, а також не змішувати їх разом, а також не використовувати жодних тимчасових файлів.

Набагато легше візуалізувати речі, якщо подумати про те, що насправді відбувається з "переадресаціями" та "трубами". Перенаправлення та труби в bash роблять одне: змінюють, де дескриптори файлів процесу 0, 1 і 2 вказують на (див. / Proc / [pid] / fd / *).

Коли труба або "|" Оператор присутній у командному рядку, перше, що має відбутися, це те, що bash створює FIFO і вказує FD 1 лівої команди на цей FIFO і вказує FD 0 правої бічної команди на ту саму fifo.

Далі, оператори переадресації для кожної сторони оцінюються зліва направо , і поточні параметри використовуються, коли відбувається дублювання дескриптора. Це важливо, тому що, оскільки труба була встановлена ​​спочатку, FD1 (ліва сторона) та FD0 (права сторона) вже змінені від того, що вони могли бути, і будь-яке дублювання цих даних відображатиме цей факт.

Тому, коли ви набираєте щось подібне:

command 2>&1 >/dev/null | grep 'something'

Ось що відбувається, щоб:

1. створюється труба (фіфо). "команда FD1" вказується на цю трубу. "grep FD0" також вказується на цю трубу
2. "команда FD2" вказується на те, куди в даний момент вказує "команда FD1" (труба)
3. "команда FD1" вказується на / dev / null

Отже, весь вихід, який "команда" записує до свого FD 2 (stderr), пробивається до труби і читається "grep" з іншого боку. Весь вихід, який "команда" записує до свого FD 1 (stdout), пробивається до / dev / null.

Якщо замість цього, виконайте такі дії:

command >/dev/null 2>&1 | grep 'something'

Ось що відбувається:

1. створюється труба і на неї вказуються "команди FD 1" і "grep FD 0"
2. "команда FD 1" вказується на / dev / null
3. "команда FD 2" вказується на те, де FD 1 в даний момент вказує (/ dev / null)

Отже, всі stdout та stderr з "команди" переходять до / dev / null. Нічого не йде в трубу, і, таким чином, "греп" закриється, не відображаючи нічого на екрані.

Також зауважте, що переспрямовування (дескриптори файлів) можуть бути лише для читання (<), лише для запису (>) або для читання-запису (<>).

Заключна примітка. Чи програма пише щось на FD1 чи FD2, повністю залежить від програміста. Хороша практика програмування диктує, що повідомлення про помилки повинні переходити до FD 2 і нормального виводу в FD 1, але ви часто зустрінете неохайне програмування, яке змішує два або інакше ігнорує умову.

Якщо ви використовуєте Bash, тоді використовуйте:

command >/dev/null |& grep "something"

http://www.gnu.org/software/bash/manual/bashref.html#Pipelines

Для тих, хто хоче назавжди перенаправляти stdout та stderr у файли, перейдіть на stderr, але зберігайте stdout, щоб писати повідомлення в tty:

# save tty-stdout to fd 3
exec 3>&1
# switch stdout and stderr, grep (-v) stderr for nasty messages and append to files
exec 2> >(grep -v "nasty_msg" >> std.err) >> std.out
# goes to the std.out
echo "my first message" >&1
# goes to the std.err
echo "a error message" >&2
# goes nowhere
echo "this nasty_msg won't appear anywhere" >&2
# goes to the tty
echo "a message on the terminal" >&3

Це перенаправить command1 stderr на command2 stdin, при цьому залишить command1 stdout як є.

exec 3>&1
command1 2>&1 >&3 3>&- | command2 3>&-
exec 3>&-

Взято з ЛДП

Я щойно придумав рішення для відправки stdoutв одну команду і stderrв іншу, використовуючи названі труби.

Ось іде.

mkfifo stdout-target
mkfifo stderr-target
cat < stdout-target | command-for-stdout &
cat < stderr-target | command-for-stderr &
main-command 1>stdout-target 2>stderr-target

Мабуть, хороша ідея згодом видалити названі труби.

Можна використовувати оболонку rc .

Спочатку встановіть пакет (це менше 1 МБ).

Це приклад того , як ви могли б відмовитися від стандартного виводу і стандартної помилки труби до Grep в rc:

find /proc/ >[1] /dev/null |[2] grep task

Ви можете це зробити, не залишаючи Bash:

rc -c 'find /proc/ >[1] /dev/null |[2] grep task'

Як ви, можливо, помітили, ви можете вказати, який дескриптор файлу ви хочете прокласти, скориставшись дужками після труби.

Стандартні дескриптори файлів нумеруються як такі:

• 0: Стандартний вхід
• 1: Стандартний вихід
• 2: Стандартна помилка

Я намагаюсь слідкувати, щоб він також працював,

command > /dev/null 2>&1 | grep 'something'