Як відобразити певні рядки з текстового файлу в Linux?

Напевно, всі знають корисні утиліти cmd line для Linux headта tail. headдозволяє друкувати перші X рядки файлу, tailробить те саме, але друкує кінець файлу. Яка хороша команда для друку середини файлу? щось на зразок middle --start 10000000 --count 20(надрукуйте 10'000'000-й до 10-ї тисячі рядків).

Я шукаю щось, що дозволить ефективно працювати з великими файлами. Я спробував, tail -n 10000000 | head 10і це жахливо повільно.

sed -n '10000000,10000020p' filename

Можливо, ви зможете трохи прискорити це так:

sed -n '10000000,10000020p; 10000021q' filename

У цих командах опція -nвикликає sed"придушення автоматичного друку простору шаблону". p«Друк [s] поточний простір шаблону» команди і qкоманда «Відразу кинути [з] СЄПН сценарію без обробки більше введення ...» Цитата з sed manсторінки .

До речі, ваша команда

tail -n 10000000 filename | head 10

починається з десятимільйонного рядка з кінця файлу, тоді як ваша "середня" команда, здається, починається з десятимільйонного початку, що було б еквівалентно:

head -n 10000010 filename | tail 10

Проблема полягає в тому, що для несортованих файлів із рядками змінної довжини будь-який процес повинен буде пройти через файл підрахунку нових рядків. Неможливо цього скоротити.

Якщо, однак, файл відсортований (наприклад, файл журналу із часовими позначками) або має фіксовані рядки довжини, то ви можете шукати у файлі на основі позиції байтів. У цьому прикладі файл журналу, ви могли б зробити бінарний пошук в діапазоні часу , як мій сценарій Python тут * робить. У випадку файлу з фіксованою довжиною запису це дуже просто. Ви просто шукаєте linelength * linecountсимволів у файлі.

^{* Я зберігаю сенс опублікувати ще одне оновлення цього сценарію. Можливо, я обійдусь цим днями.}

Я з'ясував таке використання sed

sed -n '10000000,+20p'  filename

Сподіваюся, комусь це корисно!

Це моя вперше публікація тут! У будь-якому випадку, це легко. Скажімо, ви хочете вивести рядок 8872 з вашого файлу під назвою file.txt. Ось як це зробити:

cat -n file.txt | grep '^ * 8872'

Тепер питання - знайти 20 рядків після цього. Для цього ви робите

cat -n file.txt | grep -A 20 '^ * 8872'

Для рядків навколо або перед цим див. Прапори -B та -C у посібнику зі звіту.

Відповідь Денніса - це шлях. Але, використовуючи лише голову та хвіст, під удар:

mid () {head -n $ [$ 1 + $ 2] | хвіст -n $ 2; }

Це сканує перші два рядки $ 1 + $ 2, тому набагато гірше, ніж відповідь Денніса. Але вам не потрібно запам’ятовувати всі ці букви sed, щоб використовувати його…

Використовуйте наступну команду, щоб отримати конкретний діапазон рядків

awk 'NR < 1220974{next}1;NR==1513793{exit}' debug.log | tee -a test.log

Тут debug.log - мій файл, який складається з недоліків рядків, і я використовував для друку рядків від 1220974 номер рядка до 1513793 до файлу test.log. сподіваємось, це буде корисно для зйомки діапазону ліній.

Рубінова версія.

ruby -pe 'next unless $. > 10000000 && $. < 10000020' < filename.txt

Це може бути корисним комусь. Рішення з «sed», що надаються Dennis та Dox, дуже приємні, навіть тому, що це здається швидшим.

Ви можете використовувати 'nl'.

nl filename | grep <line_num>

Наприклад, цей awk надрукує рядки між 20 і 40

awk '{if ((NR> 20) && (NR <40)) print $ 0}' / etc / passwd

Якщо ви знаєте нумери рядків, скажіть, що ви хочете отримати рядок 1, 3 і 5 з файлу, скажіть / etc / passwd:

perl -e 'while(<>){if(++$l~~[1,3,5]){print}}' < /etc/passwd

Perl - король:

perl -ne 'print if ($. == 10000000 .. $. == 10000020)' filename