Запитання з тегом «batch-processing»

У мене є написаний фрагмент багатопотокового програмного забезпечення, який робить купу симуляцій на день. Це дуже інтенсивна процесорна задача, і я запускав цю програму в хмарних сервісах, як правило, в конфігураціях на зразок 1 Гб на ядро. Я запускаю CentOS 6.7 і /proc/cpuinfoдає мені зрозуміти , що мої чотири ядра …

34 performance  vps  centos6  performance-tuning  batch-processing 

Згідно з довідковою сторінкою, xargs закриється, якщо одна з рядків виконання завершиться з помилкою 255: Якщо будь-яке виклик команди закінчується зі статусом 255, xargs негайно припиняться, не читаючи жодного подальшого введення. Повідомлення про помилку видається на stderr, коли це відбувається. Як я можу отримати xargs, щоб цього не зробити? У …

27 bash  command-line-interface  batch-processing  xargs 

Я хотів би мати змогу одночасно видаляти тисячі або десятки тисяч файлів на S3. Кожен файл був би від 1 Мб до 50 МБ. Звичайно, я не хочу, щоб користувач (або мій сервер) чекали, поки файли в процесі видалення. Отже, питання: Як S3 обробляє видалення файлів, особливо при видаленні великої …

16 amazon-s3  batch-processing