Чи все-таки є підстави вчитися AWK?

Я постійно вивчаю нові інструменти, навіть старомодні, бо люблю використовувати правильне рішення проблеми.

Тим не менш, мені цікаво, чи є ще якісь причини вивчити деякі з них. awkнаприклад , мені цікаво, але для простої обробки тексту, я можу використовувати grep, cut, sedі т.д. , а для складних, я піду на Python.

Зараз я не маю на увазі, що це не потужний і зручний інструмент. Але оскільки для вивчення нового інструменту потрібен час і енергія, чи варто того ?

Я думаю, це залежить від середовища, в якому ти опинишся. Якщо ти * nix людина, то знання awk- це хороша річ. Єдине інше середовище сценаріїв, яке можна знайти практично на кожному * nix sh. Тож grep, sed,і т. Д., Безумовно, може замінити awkсучасний мейнстрим- linuxдистрибутив, коли ви переходите до більш екзотичних систем, знаючи, що трохи awkстане справжнім.

awkможе також використовуватися для не тільки обробки тексту. Наприклад, один з моїх керівників пише астрономічний код у awk- ось наскільки він старий і надзвичайний . Ще в його часи це був найкращий інструмент для роботи ... і тепер, хоча його студенти, як я, використовують пітон, а що ні, він дотримується того, що знає і працює добре.

На завершення, у світі існує багато старого коду, який знає, що трохи awkне зашкодить. Це також зробить вас кращими * nix особи :-)

Якщо ви швидко засвоїте основи awk, ви дійсно можете зробити дивовижні речі в командному рядку.

Але справжня причина дізнатися про awk - це привід прочитати чудову книгу The AWK Programming Language від її авторів Ахо, Керніган та Вайнбергер. З імені ви могли б подумати, що це просто вчить вас страшно. Власне, це лише початок. Запуск у величезний масив проблем, які можна вирішити один раз, використовуючи стислий мову сценаріїв, що робить маніпуляції з рядками легкими - а awk був одним із перших - він навчає читача як застосовувати базу даних, аналізатор, інтерпретатор , і (якщо пам'ять служить мені) компілятор для невеликої комп'ютерної мови! Якби вони також запрограмували приклад операційної системи за допомогою awk, книга була б досить повним ознайомленням з інформатикою!

Наче чітко і лаконічно, як і оригінальна книга мови С, це також чудовий приклад доброзичливого технічного написання, зробленого правильно. Навіть індекс - це майстерність майстерності.

Awk? Якщо ви це знаєте, ви будете використовувати його в командному рядку періодично, але для чогось більшого ви відчуєте себе в пастці, не в змозі отримати доступ до більш широких функцій вашої системи та Інтернету, до яких щось на зразок Python надає доступ. Але книга? Ви завжди будете раді, що прочитаєте його!

Єдина причина, яку я використовую awk- це автоматичне розщеплення:

awk '{print $3}' < file.in

Це надрукує третє поле, обмежене пробілом у file.in. Це трохи простіше, ніж:

tr -s ' ' < file.in | cut -d' ' -f3

Я думаю, awk чудово, якщо ваш файл містить стовпці / поля . Я використовую його під час обробки / аналізу певного стовпця у файлі багатокольонок. Або якщо я хочу додати / видалити певний стовпець.

напр

awk -F \t '{ if ($2 > $3) print; }' <filename>

буде надруковано лише у тому випадку, якщо значення 2-го стовпця у файлі, відокремленому вкладкою, перевищує значення 3-го стовпця.

Звичайно, я міг би використовувати Perl або Python, але awk робить це набагато простіше за допомогою стислої однорядкової команди.

Також навчання awk є досить дешевим. Ви можете вивчити основи awk менш ніж за годину, тому це не так багато зусиль, як вивчення будь-якої іншої мови програмування / сценаріїв.

Я час від часу використовую AWK для роботи з HTML. Наприклад, цей код переводить таблиці в CSV-файли:

BEGIN {s=""; FS="n"}
/<td/ { gsub(/<[^>]*>/, ""); s=(s ", " $1);}
/<tr|<TR/ { print s; s="" }

Що чудово, якщо ви знімаєте екран. Насправді, можливо, я люблю AWK, тому що це дозволяє мені так швидко побудувати неправильне рішення проблем :) Більше прикладів . Це також згадується в чудових програмуваннях Жемчука Бентлі .

Я використовую awk кожен так часто. Це добре для простого переміщення тексту в середині трубопроводу; він заповнює дуже вузьку нішу між тим, що він взагалі не потребує і потребує вибивати Perl / Python / що завгодно.

Я б не радив витрачати на це чимало часу, але, можливо, стане в нагоді знати основи синтаксису - принаймні достатньо, щоб ви могли швидко проконсультуватися з посібником, якщо ви хочете скористатися ним.

Більшість дивних лайнерів може бути досягнуто за допомогою лайнерів Perl one - якщо ви вирішите потрапити в настрій Perl one. Або просто використовуйте Perl три вкладиші :)

Якщо ви підтримуєте сценарії оболонки, написані кимось, хто сподобався awk, то, очевидно, вам потрібно буде вивчити awk.

Навіть якщо немає ніякої практичної потреби, якщо ви вже знаєте, що регулярно висловлюватись, не знадобиться багато часу, щоб підібрати основи, і цікаво подивитися, як тоді були розроблені речі. Це досить елегантно.

Через 6 років після того, як я поставив це запитання, тепер я можу відповісти з упевненістю: ні, вивчати анк не варто.

Основні завдання - це керування, але основні команди bash або навіть інструменти GUI легко. Складніші завдання будуть легко вирішуватися за допомогою сучасних динамічних мов, таких як Python (fav або mine) або Ruby.

Ви, безумовно, повинні вивчити динамічну мову монаршних сценаріїв, оскільки це допоможе вам у багатьох завданнях (веб, адміністратор, стиснення даних, автоматизація тощо). І, вивчаючи такі інструменти, як awk, абсолютно марно, це дозволяє економити в кращому випадку кілька секунд щомісяця.

Якщо ви вже знаєте і використовуєте sed, ви можете також взяти хоча б трохи awk. Їх можна поєднати для деяких досить потужних хитрощів. Завжди вражає аудиторію.

Нещодавно Computerworld зробив інтерв'ю з Альфредом В. Ахо (одним із трьох творців AWK) про AWK. Це досить цікаве читання. Тож, можливо, ви знайдете у цьому підказки, чому це гарна ідея вивчити AWK.

Навчання AWK було для мене неоціненним в моєму останньому контракті, що працював над вбудованою системою Linux, на якій не встановлено ні Perl, ні більшість інших мов сценарію.

awk має дуже гарне співвідношення корисність / складність, а "простий awk" працює у всіх Unix / Linux / MacOS (і його можна встановити і в інших системах).

Він був розроблений в Золотий вік, коли люди ненавиділи набирати текст, тому сценарії можна писати дуже, дуже короткими та швидкими. Я спробую встановити mawk, швидку версію, нібито вона прискорює обчислення приблизно в 9 разів, awk / gawk досить повільно, тому якщо ви хочете використовувати його замість R тощо, ви можете захотіти mawk.

Це корисно здебільшого, якщо вам доводиться періодично розбирати файли журналів для передачі даних або виводу програм під час написання оболонок, тому що дуже легко досягти цього, щоб це зайняло у вас трохи більше рядків коду в python.

Він, безумовно, має більшу владу, ніж це, але, здається, це завдання, якими користується більшість людей.

Звичайно: я працюю в середовищі, де єдиними доступними мовами є: (якась мовна мова, яка генерує COBOL, OMG, OMG), bash (стара версія), perl (я ще не освоюю її), sed, awk , та деякі інші утиліти командного рядка. Знання awkврятувало мене кілька годин (і створило кілька завдань з обробки тексту з моїх колекцій - вони приходять до мене щонайменше три рази на день).

Я б сказав, що, мабуть, цього вже не варто. Я час від часу використовую його як набагато більш універсальний редактор потоків, ніж sed із включеними можливостями пошуку, але якщо ви досвідчені з python, я не знаю завдання, яке ви змогли б виконати набагато швидше, щоб компенсувати необхідний час навчитися awk.

Наступна команда, мабуть, єдина, для якої я використовував awk в останні два роки (він очищає напівзняті пакети з моїх систем Debian / Ubuntu):

$ dpkg -l|awk '/^rc/ {print $2}'|xargs sudo dpkg -P

Ні.

Хоча це може бути цікаво, ви можете робити все, що може зробити awk, використовуючи інші, більш потужні інструменти, такі як Perl.

Витратьте свій час, вивчаючи ці потужніші інструменти - і лише випадково підбирайте якісь клопоти по дорозі.

Я б сказав, що є. Щодо простих речей, AWK набагато простіше для недосвідченого sysadmin / розробника, ніж Python. Ви можете навчитися трохи AWK та багато чого робити, вивчаючи Python означає вивчити зовсім нову мову (так, я знаю, що AWK - це мова, це сенс).

Perl, можливо, зможе зробити багато речей, які AWK може зробити, але запропонувавши вибір у цей день та вік, я б обрав тут Python. Так що так, ви повинні навчитися AWK. але навчись і Python :-)

awkє мовою powertool, тому ви, ймовірно, awkдесь знайдете його, якщо ви будь-який ІТ-професіонал. Якщо ви можете обробити синтаксис і регулярні вирази, grepі sedтоді у вас не повинно виникнути жодних проблемawk і це, мабуть, варто.

Де я знайшов awkсправжній блиск у тому, щоб спростити такі речі, як обробка багаторядкових записів та керування / інтерполяція декількох файлів одночасно.

Тепер, коли PERL переноситься майже на кожну значну платформу, я б сказав, що цього не варто. Це більш універсально, ніж sed і awk разом. Що стосується автоматичного розщеплення, ви можете зробити це в perl, як це:

perl -F':' -ane 'print $F[3],"\n";' /etc/passwd

EDIT: можливо, ви все ще хочете трохи ознайомитись з awk, оскільки деякі інші інструменти базуються на його філософії дії, що базується на шаблонах (наприклад, DTrace на Solaris).

Я працюю в області файлів у стовпчиковому форматі Тож awk для мене неоціненний, щоб РЕФОРМУВАТИ файл, щоб різні програми могли працювати разом. Для професіоналів, які не є ІТ, використання awk досить і досконало. Зараз день, швидкість роботи комп'ютера - це не проблема, тому я можу комбінувати awk & unix для передачі багатьох команд 1 вкладишів у "скрипт". За допомогою Awk пошуку по полям і записам я використовую його для перевірки даних файлів дуже швидко, замість "vi", щоб відкрити файл. Я мушу сказати, що здатність awk принесла радість моїй роботі спеціально, я в змозі допомогти співпрацівнику швидко розібратися з допомогою awk. Дивовижний код для мене.

Нещодавно я намагався візуалізувати мережеві файли pcap, що реєструють атаку DOS, яка становила понад 20 Гбіт. Мені потрібна була мітка часу та Ip-адреси. За моїм сценарієм, однокласинка AWK також працювала казково і досить швидко. Я спеціально використовував AWK для очищення вилучених файлів, отримання ip-адрес та загальної кількості пакетів з цих IP-адрес протягом згрупованого періоду часу. Я повністю згоден з тим, що писали інші люди вище. Це залежить від ваших потреб.

Однією з причин НЕ вивчати awk є те, що в ньому немає не жадібних відповідностей у регулярних виразах.

У мене є код awk, який тепер я повинен переписати лише тому, що я раптом налагодив, що в awk / gawk немає такого поняття, як не жадібні відповідники, тому він не може правильно виконати деякі регекси.

Це залежить від ваших товаришів по команді та вашого керівника та завдання, над яким ви працюєте.

if( team mates and leader ask to write awk ){
  if( you can reject that){
    if( awk code is very small){
      learn little just like learn Regex
    }else{
      use python or even java
    }
  }else{
    do as they ask
  }
}

Я в даний час роблю кодування в python. Але я все ще не знаю цього досить добре, щоб легко використовувати для простих одноразових перетворень файлів.

За допомогою awk я можу швидко розробити однорядковий фрагмент коду в командному рядку Unix, який робить деякі досить швейцарські перетворення. Щоразу, коли я використовую awk, фрагмент коду, який я пишу, буде одноразовим і не більше кількох рядків. Може бути "if" statment та "printf" тут або там у одному рядку.

Я ніколи не писав шматок коду, довжиною більше 10 рядків з awk. Я бачив кілька таких сценаріїв років тому.

Але все, що вимагало багато рядків коду, я б вдався до python.

Я люблю awk. Це дуже потужний засіб в поєднанні з sed.