Пошук з урахуванням регістру та заміну на sed

Я намагаюся використовувати SED для вилучення тексту з файлу журналу. Я можу виконати пошук і заміну без зайвих проблем:

sed 's/foo/bar/' mylog.txt

Однак я хочу зробити пошук нечутливим до регістру. З того, що я погуглив, схоже, додавання iдо кінця команди повинно працювати:

sed 's/foo/bar/i' mylog.txt

Однак це дає мені повідомлення про помилку:

sed: 1: "s/foo/bar/i": bad flag in substitute command: 'i'

Що тут не так, і як це виправити?

Оновлення : Починаючи з MacOS Big Sur (11,0) , в sedданий час робить підтримку Iпрапора для регістронезавісімого узгодження , так що команда в цьому питанні повинна працювати (BSD sedне повідомляє про свою версію, але ви можете піти за датою в нижній частині на manсторінці, яка повинна бути March 27, 2017або більш пізньої); простий приклад:

# BSD sed on macOS Big Sur and above (and GNU sed, the default on Linux)
$ sed 's/ö/@/I' <<<'FÖO'
F@O   # `I` matched the uppercase Ö correctly against its lowercase counterpart

^{Примітка: I(верхній регістр) - це задокументована форма прапора, алеi працює.}

Крім того , починаючи з MacOS Big Sur (11,0) в awkданий час є локалі відомо ( awk --versionслід повідомляти 20200816або більш пізні):

# BSD awk on macOS Big Sur and above (and GNU awk, the default on Linux)
$ awk 'tolower($0)' <<<'FÖO'
föo  # non-ASCII character Ö was properly lowercased

Наступне стосується macOS аж до Каталіни (10.15) :

Щоб бути зрозумілим: на macOS sed- який є реалізацією BSD - НЕ підтримує співставлення без урахування регістру - важко повірити, але правда. Раніше прийняв відповідь , який сам по собі показує GNU sed команду, отримав цей статус через perl-О рішенням , зазначеним в коментарях.

Щоб змусити це рішення Perl працювати і з іноземними символами , через UTF-8, використовуйте щось на зразок:

perl -C -Mutf8 -pe 's/öœ/oo/i' <<< "FÖŒ" # -> "Foo"

• -C вмикає підтримку UTF-8 для потоків та файлів, припускаючи, що поточна локаль заснована на UTF-8.
• -Mutf8говорить Perl інтерпретувати вихідний код як UTF-8 (у цьому випадку рядок передається -pe) - це коротший еквівалент більш багатослівного -e 'use utf8;'.^{Спасибі, Марк Рід}

(Зверніть увагу, що використання awkтакож не є опцією , оскільки awkна macOS (тобто, BWK awk та BSD awk ), здається, зовсім не обізнані про локалі - його tolower()та toupper()функції ігнорують сторонні символи (та sub()/ gsub()не мають прапорів чутливості до регістру для початку) з).)

Примітка про взаємозв'язок sedі awkстандарт POSIX:

BSD sedта awkобмежують їх функціональність здебільшого тим, що передбачено специфікаціями POSIXsed та POSIXawk , тоді як їх аналоги GNU реалізують набагато більше розширень.

^{Примітка редактора : Це рішення не працює на macOS (нестандартно), оскільки воно стосується лише GNU sed , тоді як macOS постачається з BSD sed .}

Пропишіть «Я».

sed 's/foo/bar/I' file

Іншим робочим процесом для sedMac OS X є встановлення gsedз MacPorts або HomeBrew, а потім створення псевдоніма sed='gsed'.

SED FAQ адреси тісно пов'язаний регістронезавісімий пошук . Він вказує, що а) багато версій sed підтримують для нього прапор, і b) це незручно робити в sed, вам краще скористатися awk або Perl.

Але зробити це в POSIX sed , вони пропонують три варіанти (пристосовані для заміни тут):

1. Перетворити на великі регістри та зберегти оригінальний рядок у просторі утримання; однак це не буде працювати для замін, оскільки початковий вміст буде відновлено перед друком, тому це добре лише для вставки або додавання рядків на основі збігу регістру, що не враховує регістр.

2. Можливо, можливості обмежені FOO, Fooі foo. Вони можуть бути покриті

    s/FOO/bar/;s/[Ff]oo/bar/
   

3. Для пошуку всіх можливих збігів можна використовувати вирази в дужках для кожного символу:

    s/[Ff][Oo][Oo]/bar/
   

Якщо ви спочатку робите збіг шаблонів, наприклад,

/pattern/s/xx/yy/g

тоді ви хочете поставити Iшаблон після:

/pattern/Is/xx/yy/g

Приклад:

echo Fred | sed '/fred/Is//willma/g'

повертається willma; без I, він повертає рядок недоторканим ( Fred).

Версія для Mac sedвидається дещо обмеженою. Один із способів обійти це - використання контейнера Linux (через Docker), який має корисну версію sed:

cat your_file.txt | docker run -i busybox /bin/sed -r 's/[0-9]{4}/****/Ig'

У мене була подібна потреба, і я придумав таке:

ця команда, щоб просто знайти всі файли:

grep -i -l -r foo ./* 

цей, щоб виключити this_shell.sh (на випадок, якщо ви введете команду в скрипт, який називається this_shell.sh ), виведіть вихід на консоль, щоб побачити, що сталося, а потім використовуйте sed для кожного знайденого імені файлу, щоб замінити текст foo на bar :

grep -i -l -r --exclude "this_shell.sh" foo ./* | tee  /dev/fd/2 | while read -r x; do sed -b -i 's/foo/bar/gi' "$x"; done 

Я вибрав цей метод, оскільки мені не сподобалось, що всі позначки часу змінюються для файлів, не змінених. подання результату grep дозволяє переглядати лише файли з цільовим текстом (таким чином, ймовірно, це також може покращити продуктивність / швидкість)

перед використанням обов’язково зробіть резервну копію файлів і тестуйте Може не працювати в деяких середовищах для файлів із вбудованими пробілами. (?)

Використовуйте наступне, щоб замінити всі випадки: sed 's / foo / bar / gI' mylog.txt