Запитання з тегом «xargs»

Я використовую xargsдля виклику сценарію python для обробки близько 30 мільйонів невеликих файлів. Я сподіваюся використовувати xargsдля паралелізації процесу. Я використовую команду: find ./data -name "*.json" -print0 | xargs -0 -I{} -P 40 python Convert.py {} > log.txt В основному, Convert.pyбуде читати у невеликому файлі json (4kb), виконати деяку обробку …

9 xargs  parallelism 

Коли я запускаю таку команду: > mkdir some_dir > find /foo/bar/ -name '*.csv' -print0 | xargs -0 mv {} some_dir Я отримую сотні рядків, які говорять: mv: target `/foo/bar/XX.csv` is not a directory Чому? Я думав, що xargs виконає: mv /foo/barXX.csv some_dir для кожного findзнайденого файлу . Що відбувається? До …

9 find  xargs 

Припустимо, у мене є маса файлів /tmp/. я згоден find . -type f | xargs -iFILES І я хочу зробити md5sumв кожному файлі, виводячи у файл з тим самим іменем, але з .md5розширенням. find . -type f | xargs -iFILES md5sum FILES > FILES.md5 Це має створити файл md5 для …

9 find  io-redirection  xargs