Під час виконання сценаріїв оболонок, як правило, дані будуть знаходитись у файлах однорядкових записів, таких як csv. Дійсно обробляти ці дані за допомогою grepта sed. Але мені доводиться стикатися з XML часто, тому мені дуже сподобається спосіб скриптування доступу до цих XML-даних за допомогою командного рядка. Які найкращі інструменти?

Я знайшов xmlstarlet дуже гарним у подібних речах.

http://xmlstar.sourceforge.net/

Має бути доступним і в більшості дистрибутивів дистрибутива. Вступний посібник тут:

http://www.ibm.com/developerworks/library/x-starlet.html

Деякі перспективні інструменти:

• nokogiri : аналіз HTML / XML DOM в рубіні за допомогою селекторів XPath та CSS

• hpricot : застарілий

• fxgrep : використовує власний синтаксис, схожий на XPath, для запиту документів. Написано в SML, тому установка може бути складною.

• LT XML : XML інструментарій , отриманий з інструментів SGML, в тому числі sggrep, sgsort, xmlnormта інші. Використовує власний синтаксис запиту. Документація дуже формальна. Написано у C. LT XML 2 заявляє про підтримку XPath, XInclude та інших стандартів W3C.

• xmlgrep2 : простий та потужний пошук за допомогою XPath. Написано в Perl за допомогою XML :: LibXML та libxml2.

• XQSharp : Підтримує XQuery, розширення на XPath. Написано для .NET Framework.

• xml-coreutils : інструментарій Laird Breyer, еквівалентний GNU coreutils. Обговорено в цікавому нарисі про те, що повинен містити ідеальний інструментарій.

• xmldiff : простий інструмент для порівняння двох файлів xml.

• xmltk : схоже, не має пакета в debian, ubuntu, fedora чи макпортах, не мав випуску з 2007 року та використовує не портативну автоматизацію збірки.

xml-coreutils видається найкращим чином зафіксованим та найбільш орієнтованим на UNIX.

До відмінного списку Джозефа Холстена я додаю сценарій командного рядка xpath, який постачається з бібліотекою Perl XML :: XPath. Чудовий спосіб отримати інформацію з XML-файлів:

 xpath -q -e '/entry[@xml:lang="fr"]' *xml

Є також xml2і 2xmlпара. Це дозволить звичайним інструментам редагування рядків обробляти XML.

Приклад. q.xml:

<?xml version="1.0"?>
<foo>
    text
    more text
    <textnode>ddd</textnode><textnode a="bv">dsss</textnode>
    <![CDATA[ asfdasdsa <foo> sdfsdfdsf <bar> ]]>
</foo>

xml2 < q.xml

/foo=
/foo=   text
/foo=   more text
/foo=   
/foo/textnode=ddd
/foo/textnode
/foo/textnode/@a=bv
/foo/textnode=dsss
/foo=
/foo=    asfdasdsa <foo> sdfsdfdsf <bar> 
/foo=

xml2 < q.xml | grep textnode | sed 's!/foo!/bar/baz!' | 2xml

<bar><baz><textnode>ddd</textnode><textnode a="bv">dsss</textnode></baz></bar>

PS Є також html2/ 2html.

Ви можете використовувати xmllint:

xmllint --xpath //title books.xml

Він має бути в комплекті з більшістю дистрибутивів, а також в комплекті з Cygwin.

$ xmllint --version
xmllint: using libxml version 20900

Побачити:

$ xmllint
Usage : xmllint [options] XMLfiles ...
        Parse the XML files and output the result of the parsing
        --version : display the version of the XML library used
        --debug : dump a debug tree of the in-memory document
        ...
        --schematron schema : do validation against a schematron
        --sax1: use the old SAX1 interfaces for processing
        --sax: do not build a tree but work just at the SAX level
        --oldxml10: use XML-1.0 parsing rules before the 5th edition
        --xpath expr: evaluate the XPath expression, inply --noout

Якщо ви шукаєте рішення в Windows, Powershell має вбудований функціонал для читання та запису XML.

test.xml:

<root>
  <one>I like applesauce</one>
  <two>You sure bet I do!</two>
</root>

Сценарій Powershell:

# load XML file into local variable and cast as XML type.
$doc = [xml](Get-Content ./test.xml)

$doc.root.one                                   #echoes "I like applesauce"
$doc.root.one = "Who doesn't like applesauce?"  #replace inner text of <one> node

# create new node...
$newNode = $doc.CreateElement("three")
$newNode.set_InnerText("And don't you forget it!")

# ...and position it in the hierarchy
$doc.root.AppendChild($newNode)

# write results to disk
$doc.save("./testNew.xml")

testNew.xml:

<root>
  <one>Who likes applesauce?</one>
  <two>You sure bet I do!</two>
  <three>And don't you forget it!</three>
</root>

Джерело: /server/26976/update-xml-from-the-command-line-windows

Є також xmlsed & xmlgrep NetBSD xmltools!

http://blog.huoc.org/xmltools-not-dead.html

Залежить саме від того, що ви хочете зробити.

XSLT може бути дорогою, але крива навчання є. Спробуйте xsltproc і зауважте, що ви можете передати параметри.

Також є saxon-lintкомандний рядок із можливістю використання XPath 3.0 / XQuery 3.0. (Інші інструменти командного рядка використовують XPath 1.0).

ПРИКЛАДИ:

http / html:

$ saxon-lint --html --xpath 'count(//a)' http://stackoverflow.com/q/91791
328

xml:

$ saxon-lint --xpath '//a[@class="x"]' file.xml

Д. Богдан підтримує репо з GitHub з відкритим кодом, який зберігає список інструментів командного рядка для структурованих текстових інструментів, там є розділ для інструментів XML / HTML:

https://github.com/dbohdan/structured-text-tools#xml-html

XQuery може бути хорошим рішенням. Це (відносно) легко вивчити і є стандартом W3C.

Я б рекомендував XQSharp для процесора командного рядка.

Я вперше використав xmlstarlet і досі його використовую. Коли запит стає жорстким, мені потрібна підтримка функції xpath2 і xquery XML, я звертаюся до xidel http://www.videlibri.de/xidel.html

Греп-еквівалент

Ви можете визначити функцію bash, скажімо, "xp" ("xpath"), яка охоплює деякий код python3. Для його використання потрібно встановити python3 та python-lxml. Переваги:

1. відповідність регулярних виразів, яких вам не вистачає, наприклад, xmllint.
2. Використовувати як фільтр (у трубі) у командному рядку

Просто та потужно користуватися таким чином:

xmldoc=$(cat <<EOF
<?xml version="1.0" encoding="utf-8"?>
<job xmlns="http://www.sample.com/">programming</job>
EOF
)
selection='//*[namespace-uri()="http://www.sample.com/" and local-name()="job" and re:test(.,"^pro.*ing$")]/text()'
echo "$xmldoc" | xp "$selection"
# prints programming

xp () виглядає приблизно так:

xp()
{ 
local selection="$1";
local xmldoc;
if ! [[ -t 0 ]]; then
    read -rd '' xmldoc;
else
    xmldoc="$2";
fi;
python3 <(printf '%b' "from lxml.html import tostring\nfrom lxml import etree\nfrom sys import stdin\nregexpNS = \"http://exslt.org/regular-expressions\"\ntree = etree.parse(stdin)\nfor e in tree.xpath('""$selection""', namespaces={'re':regexpNS}):\n  if isinstance(e, str):\n    print(e)\n  else:\n    print(tostring(e).decode('UTF-8'))") <<< "$xmldoc"
}

Сід еквівалентний

Подумайте про використання xq, що дає повну потужність jq "мови програмування". Якщо у вас встановлено python-pip, ви можете встановити xq за допомогою pip install yq , тоді в наведеному нижче прикладі ми замінюємо "Зберігати облікові записи" на "Зберігати акаунти 2":

xmldoc=$(cat <<'EOF'
<resources>
    <string name="app_name">Keep Accounts</string>
    <string name="login">"login"</string>
    <string name="login_password">"password："</string>
    <string name="login_account_hint">input to login</string>
    <string name="login_password_hint">input your password</string>
    <string name="login_fail">login failed</string>
</resources>
EOF
)
echo "$xmldoc" | xq '.resources.string = ([.resources.string[]|select(."#text" == "Keep Accounts") ."#text" = "Keep Accounts 2"])' -x

JEdit має плагін під назвою "XQuery", який забезпечує функціональність запитів для XML-документів.

Не зовсім командний рядок, але він працює!