Трубопроводи з Мореутілсом ц

У мене вхідний потік на послідовному порту, з новими рядками, що з’являються приблизно раз на секунду

wren@Raven:~$ cat /dev/ttyUSB0

A_Sensor1,B_22.00,C_50.00

A_Sensor1,B_22.00,C_50.00

A_Sensor1,B_22.00,C_50.00

A_Sensor1,B_22.00,C_50.00

A_Sensor1,B_22.00,C_50.00

Я хочу зняти порожні рядки та позначити решту часу.

sed знищить порожні рядки та додасть часову позначку, але я не можу оновлювати часову марку, вона просто повідомляє про час, коли її викликали:

wren@Raven:~$ cat /dev/ttyUSB0 | sed -e '/^$/d' -e "s/$/`date +\,%F\,%T`/"
A_Sensor1,B_22.00,C_50.00,2014-05-14,09:44:42
A_Sensor1,B_22.00,C_50.00,2014-05-14,09:44:42
A_Sensor1,B_22.00,C_50.00,2014-05-14,09:44:42
A_Sensor1,B_22.00,C_50.00,2014-05-14,09:44:42
A_Sensor1,B_22.00,C_50.00,2014-05-14,09:44:42
A_Sensor1,B_22.00,C_50.00,2014-05-14,09:44:42
A_Sensor1,B_22.00,C_50.00,2014-05-14,09:44:42
^C

Я знайшов ts, що є частиною Moreutils, і можу надіслати його, щоб отримати часову мітку оновлення.

wren@Raven:~$ cat /dev/ttyUSB0 |  ts
May 14 09:49:26 A_Sensor1,B_22.00,C_50.00
May 14 09:49:26
May 14 09:49:27 A_Sensor1,B_22.00,C_50.00
^C

Однак я не можу правильно поєднувати тс з sed.

Це, схоже, має робити те, що я хочу, взагалі не дає результатів

wren@Raven:~$ cat /dev/ttyUSB0 | sed -e '/^$/d' | ts
^C
wren@Raven:~$

Однак зміна порядку труби дає результат, але, звичайно, не позбавлені лінії, які вже не пусті. Інші заміни працюють добре, тому я знаю, що труба до sed працює.

wren@Raven:~$ cat /dev/ttyUSB0 |  ts | sed -e '/^$/d'
May 14 10:07:25 A_Sensor1,B_22.00,C_50.00
May 14 10:07:25
May 14 10:07:26 A_Sensor1,B_22.00,C_50.00
May 14 10:07:26
^C

Тож я трохи збита з пантелику. Я, мабуть, можу змусити sed видалити небажані лінії, але мітка часу перед видаленням повинна бути неправильним підходом.

Буду вдячний за пояснення та допомогу.

Відповісти на питання безпосередньо - sedце буферизація, і це єдина проблема.
Ви можете виправити це, сказавши, щоб він не буферував його -u/ --unbufferedflag:

sed -u '/^$/d' /dev/ttyUSB0 | ts

З тестовим джгутом (але його потрібно запустити для підтвердження):

$ (echo -e 'banana\n\n'; sleep 2; echo 'cheese') | sed -u '/^$/d' | ts
May 14 11:26:05 banana
May 14 11:26:07 cheese

Ви можете зіткнутися з подібними труднощами з іншими редакторами потоків. Вони, мабуть, всі хочуть трішки захистити. Хоча всі вони мають обхідні шляхи. Ось купа команд, які я перевірив:

... | mawk -W interactive '/./' | ts
... | gawk '/./ { print $0; fflush(); }' | ts
... | grep --line-buffered '.' | ts
... | perl -n -e 'print if /./' | ts

Інша ідея - просто дозволити gawkвпоратися. Він може фільтрувати непорожні рядки і робити друк дат для вас (дякуючи Кірону SO ):

awk '/./ { print strftime("%Y-%m-%d %H:%M:%S"), $0; fflush(); }' /dev/ttyUSB0

Це спалах відразу після надходження рядків. gawkОсобливо корисно тут, якщо ви хочете робити інші речі ... Якщо ви хочете перевірити, чи відповідає четвертий стовпець стовпця (попереднього ts) регулярним виразом, ви можете (наприклад $4~/\d{4}/). Awk (та його варіанти) дуже гнучкі для обробки потоку.

Ще один тестовий джгут:

$ gawk '/./ { print strftime("%Y-%m-%d %H:%M:%S"), $0; fflush(); }' <(
      echo -e 'banana\n\n';
      sleep 2;
      echo 'cheese'
  )
2014-05-14 11:13:59 banana
2014-05-14 11:14:01 cheese

Баш може впоратися з цим у while readциклі

(echo -e 'banana\n\n'; sleep 2; echo 'cheese') | 
while IFS= read -r line; do 
    [[ $line ]] && echo "$(date "+%F %T") line"
done

2014-05-14 06:34:06 banana
2014-05-14 06:34:08 cheese

Ви можете видалити рядки лише з пробілом із хитрим розширенням параметрів: видаліть усі провідні пробіли та побачите, чи рядок порожній:

shopt -s extglob

(echo -e '  banana\n\t\n'; sleep 2; echo 'cheese') |
while IFS= read -r line; do
    [[ "${line/#+([[:blank:]])/}" ]] && echo "$(date "+%F %T") $line"
done