підрахунок дублікатів у відсортованій послідовності за допомогою інструментів командного рядка

У мене є команда (cmd1), яка прокручує файл журналу, щоб відфільтрувати набір чисел. Числа розташовані в довільному порядку, тому я використовую сортування -gr, щоб отримати зворотний відсортований список чисел. У цьому відсортованому списку можуть бути дублікати. Мені потрібно знайти кількість кожного унікального числа в цьому списку.

Наприклад, якщо вихідний результат cmd1:

100 
100 
100 
99 
99 
26 
25 
24 
24

Мені потрібна ще одна команда, до якої я можу направити вищевказаний вихід, щоб я отримав:

100     3
99      2
26      1
25      1
24      2

як щодо;

$ echo "100 100 100 99 99 26 25 24 24" \
    | tr " " "\n" \
    | sort \
    | uniq -c \
    | sort -k2nr \
    | awk '{printf("%s\t%s\n",$2,$1)}END{print}'

Результат:

100 3
99  2
26  1
25  1
24  2

uniq -c працює принаймні для GNU uniq 8.23 ​​і робить саме те, що ви хочете (за умови сортування вводу).

якщо порядок не важливий

# echo "100 100 100 99 99 26 25 24 24" | awk '{for(i=1;i<=NF;i++)a[$i]++}END{for(o in a) printf "%s %s ",o,a[o]}'
26 1 100 3 99 2 24 2 25 1

Числово відсортуйте числа в зворотному порядку, потім порахуйте дублікати, а потім поміняйте місцями лівий та правий слова. Вирівняти за стовпцями.

printf '%d\n' 100 99 26 25 100 24 100 24 99 \
   | sort -nr | uniq -c | awk '{printf "%-8s%s\n", $2, $1}'

100     3
99      2
26      1
25      1
24      2

У Bash ми можемо використовувати асоціативний масив для підрахунку екземплярів кожного вхідного значення. Припускаючи, що ми маємо команду $cmd1, наприклад

#!/bin/bash

cmd1='printf %d\n 100 99 26 25 100 24 100 24 99'

Тоді ми можемо підрахувати значення у змінній масиву, aвикористовуючи ++математичний оператор у відповідних записах масиву:

while read i
do
    ((++a["$i"]))
done < <($cmd1)

Ми можемо роздрукувати отримані значення:

for i in "${!a[@]}"
do
    echo "$i ${a[$i]}"
done

Якщо порядок виведення важливий, нам може знадобитися зовнішній sortключ:

for i in $(printf '%s\n' "${!a[@]}" | sort -nr)
do
    echo "$i ${a[$i]}"
done