Виберіть рядок для шаблону заміни sed

У моєму скрипті bash у мене є зовнішня (отримана від користувача) рядок, яку я повинен використовувати в шаблоні sed.

REPLACE="<funny characters here>"
sed "s/KEYWORD/$REPLACE/g"

Як я можу уникнути $REPLACEрядка, щоб його сміливо сприйняли sedяк буквальну заміну?

Примітка:KEYWORD німа подстрока, без сірників і т.д. Це не поставляється користувачем.

Попередження : це не враховує нових рядків. Для більш поглибленої відповіді див . Замість цього питання SO . (Спасибі, Ед Мортон та Ніклас Пітер)

Зауважте, що уникнути всього - це погана ідея. SED потреба багато символів , щоб бути екрановані , щоб отримати свій особливий сенс. Наприклад, якщо уникнути цифри в рядку заміни, вона перетвориться на зворотну референцію.

Як сказав Бен Бланк, у рядку заміни потрібно уникнути лише трьох символів (втечі самі, косої риски для кінця оператора та & для заміни всіх):

ESCAPED_REPLACE=$(printf '%s\n' "$REPLACE" | sed -e 's/[\/&]/\\&/g')
# Now you can use ESCAPED_REPLACE in the original sed statement
sed "s/KEYWORD/$ESCAPED_REPLACE/g"

Якщо вам коли-небудь знадобиться вийти з KEYWORDрядка, вам потрібен наступний:

sed -e 's/[]\/$*.^[]/\\&/g'

І можуть бути використані:

KEYWORD="The Keyword You Need";
ESCAPED_KEYWORD=$(printf '%s\n' "$KEYWORD" | sed -e 's/[]\/$*.^[]/\\&/g');

# Now you can use it inside the original sed statement to replace text
sed "s/$ESCAPED_KEYWORD/$ESCAPED_REPLACE/g"

Пам'ятайте, що якщо ви використовуєте символ, який не /є роздільником, вам потрібно замінити косу рису в виразах, вищих над символом, який ви використовуєте. Дивіться коментар PeterJCLaw для пояснення.

Відредаговано: Через деякі кутові випадки, які раніше не обліковувалися, команди вище були змінені кілька разів. Перевірте історію редагування для отримання детальної інформації.

Команда sed дозволяє використовувати інші символи замість /розділювача:

sed 's#"http://www\.fubar\.com"#URL_FUBAR#g'

Подвійні цитати не є проблемою.

Єдиними трьома буквальними символами, які спеціально обробляються в пункті заміни, є /(закрити пункт), \(уникнути символів, зворотній зв'язок тощо) та &(включити відповідність у заміну). Тому все, що вам потрібно зробити, - це уникнути цих трьох символів:

sed "s/KEYWORD/$(echo $REPLACE | sed -e 's/\\/\\\\/g; s/\//\\\//g; s/&/\\\&/g')/g"

Приклад:

$ export REPLACE="'\"|\\/><&!"
$ echo fooKEYWORDbar | sed "s/KEYWORD/$(echo $REPLACE | sed -e 's/\\/\\\\/g; s/\//\\\//g; s/&/\\\&/g')/g"
foo'"|\/><&!bar

Спираючись на регулярні вирази Pianosaurus, я зробив функцію bash, яка уникає як ключового слова, так і заміни.

function sedeasy {
  sed -i "s/$(echo $1 | sed -e 's/\([[\/.*]\|\]\)/\\&/g')/$(echo $2 | sed -e 's/[\/&]/\\&/g')/g" $3
}

Ось як ви його використовуєте:

sedeasy "include /etc/nginx/conf.d/*" "include /apps/*/conf/nginx.conf" /etc/nginx/nginx.conf

Трохи пізно реагувати ... але існує набагато простіший спосіб зробити це. Просто змініть роздільник (тобто символ, який розділяє поля). Отже, замість s/foo/bar/вас пишіть s|bar|foo.

І ось простий спосіб зробити це:

sed 's|/\*!50017 DEFINER=`snafu`@`localhost`\*/||g'

Отриманий результат позбавлений цього неприємного пункту DEFINER.

Виявляється, ви задаєте неправильне запитання. Я також задав неправильне запитання. Причина, що це неправильно, - це початок першого речення: "У моєму баш- скрипті ...".

У мене було те саме питання і я зробив ту саму помилку. Якщо ви використовуєте bash, вам не потрібно використовувати sed для заміни рядків (і набагато чистіше використовувати функцію заміни, вбудовану в bash).

Замість чогось такого, наприклад:

function escape-all-funny-characters() { UNKNOWN_CODE_THAT_ANSWERS_THE_QUESTION_YOU_ASKED; }
INPUT='some long string with KEYWORD that need replacing KEYWORD.'
A="$(escape-all-funny-characters 'KEYWORD')"
B="$(escape-all-funny-characters '<funny characters here>')"
OUTPUT="$(sed "s/$A/$B/g" <<<"$INPUT")"

ви можете використовувати виключно функції bash:

INPUT='some long string with KEYWORD that need replacing KEYWORD.'
A='KEYWORD'
B='<funny characters here>'
OUTPUT="${INPUT//"$A"/"$B"}"

Використовуйте awk - це чистіше:

$ awk -v R='//addr:\\file' '{ sub("THIS", R, $0); print $0 }' <<< "http://file:\_THIS_/path/to/a/file\\is\\\a\\ nightmare"
http://file:\_//addr:\file_/path/to/a/file\\is\\\a\\ nightmare

Ось приклад AWK, який я використовував деякий час тому. Це AWK, який друкує нові AWKS. Подібність AWK та SED може бути хорошим шаблоном.

ls | awk '{ print "awk " "'"'"'"  " {print $1,$2,$3} " "'"'"'"  " " $1 ".old_ext > " $1 ".new_ext"  }' > for_the_birds

Це виглядає надмірно, але якимось чином комбінація цитат спрацьовує, щоб зберегти 'друковані як буквальні. Тоді, якщо я добре пам’ятаю, змінні просто оточені цитатами: «$ 1». Спробуйте, дайте мені знати, як це працює з SED.

У мене є вдосконалення щодо функції sedeasy, яку ВИНАГАЮТЬ із спеціальними символами, такими як вкладка.

function sedeasy_improved {
    sed -i "s/$(
        echo "$1" | sed -e 's/\([[\/.*]\|\]\)/\\&/g' 
            | sed -e 's:\t:\\t:g'
    )/$(
        echo "$2" | sed -e 's/[\/&]/\\&/g' 
            | sed -e 's:\t:\\t:g'
    )/g" "$3"
}

Отже, чим відрізняється? $1і $2загорнуті в лапки, щоб уникнути розширення оболонок і зберегти вкладки або подвійні пробіли.

Додатковий трубопровід | sed -e 's:\t:\\t:g'(мені подобається :маркер), який перетворює вкладку в \t.

Це коди втечі, які я знайшов:

* = \x2a
( = \x28
) = \x29

" = \x22
/ = \x2f
\ = \x5c

' = \x27
? = \x3f
% = \x25
^ = \x5e

не забувайте про все задоволення, яке виникає при обмеженні оболонки навколо "і"

так (в кш)

Var=">New version of \"content' here <"
printf "%s" "${Var}" | sed "s/[&\/\\\\*\\"']/\\&/g' | read -r EscVar

echo "Here is your \"text\" to change" | sed "s/text/${EscVar}/g"

Якщо ви просто хочете замінити значення змінної у команді sed, тоді просто видаліть Приклад:

sed -i 's/dev-/dev-$ENV/g' test to sed -i s/dev-/dev-$ENV/g test

Якщо так сталося, що ви генеруєте випадковий пароль для передачі для sedзаміни шаблону, то ви вирішите бути уважним щодо того, який набір символів у випадковому рядку. Якщо ви вибрали пароль, кодований значенням як base64, то в base64 можливий лише символ, який також є спеціальним символом в sedшаблоні заміни. Цей символ є "/" і легко видаляється з пароля, який ви створюєте:

# password 32 characters log, minus any copies of the "/" character.
pass=`openssl rand -base64 32 | sed -e 's/\///g'`;

Простіший спосіб зробити це - просто побудувати рядок перед рукою і використовувати його як параметр для sed

rpstring="s/KEYWORD/$REPLACE/g"
sed -i $rpstring  test.txt