Після додавання preloadпакета мої програми, здається, пришвидшуються, але якщо я скопіюю великий файл, кеш файлів зростає більш ніж удвічі більше розміру файлу.

Передавши одне віртуальне зображення або відеофайл розміром 3-4 Гб на зовнішній диск, схоже, цей величезний кеш видаляє всі попередньо завантажені програми з пам'яті, що призводить до збільшення часу завантаження та зниження загальної продуктивності.

Чи є спосіб скопіювати великі багатогігабайтні файли, не кешуючи їх (тобто обходячи кеш файлів)? Або спосіб збереження певних папок чи білого списку певних папок?

Є nocacheутиліта, яка може претендувати на команду, як ioniceі nice. Він працює підтискати бібліотека , яка додає posix_fadviseз POSIX_FADV_DONTNEEDпрапором на будь-які відкриті дзвінки.

Простіше кажучи, він радить ядру, що кешування для цього конкретного файлу не потрібно; ядро зазвичай не буде кешувати файл. Дивіться тут для технічних деталей.

Це робить чудеса для будь-яких величезних копіювальних завдань, наприклад, якщо ви хочете створити резервну копію мульти терабайтного диска у фоновому режимі з найменшим впливом на вашу працюючу систему, ви можете щось робити разом nice -n19 ionice -c3 nocache cp -a /vol /vol2.

Пакет буде доступний в Ubuntu 13.10 і вище. Якщо ви переглядаєте попередній реліз, ви можете встановити пакет 13.10 або обрати для цього 12.04 резервний порт Франсуа Марієр.

Для окремих великих файлів, використання ddз прямим I / O в обході кешу файлів:

Якщо ви хочете перенести один (або кілька) великих багатогабайтних файлів, це легко зробити dd:

dd if=/path/to/source of=/path/to/destination bs=4M iflag=direct oflag=direct

• Ці directпрапори кажуть , ddщоб використовувати пряму опцію ядра I / O ( O_DIRECT) у час читання і запису, таким чином , повністю минаючи кеш файлів.
• Параметр bsблочного розміру повинен бути встановлений на досить велике значення, оскільки для мінімізації кількості операцій з фізичним диском ddнеобхідно виконати, оскільки читання / запис більше не кешоване, і занадто багато малих прямих операцій можуть призвести до серйозного сповільнення.
  • Ви можете експериментувати зі значеннями від 1 до 32 Мб; налаштування вище - 4 Мб ( 4M).

Для декількох / рекурсивних копій каталогів , на жаль, не існує легко доступних інструментів; звичайні cpтощо не підтримують прямий ввід / вивід.

/ e iflags & oflags змінено на правильний iflag & oflag

Ви можете скопіювати каталог рекурсивно за ddдопомогою findіmkdir

Нам потрібно вирішити дві проблеми:

1. dd не знає, що робити з каталогами
2. dd може копіювати один файл за один раз

Спочатку давайте визначимо вхідні та вихідні каталоги:

SOURCE="/media/source-dir"
TARGET="/media/target-dir"

Тепер перейдемо cdдо каталогу джерел, щоб findповідомити про відносні каталоги, якими ми можемо легко маніпулювати:

cd "$SOURCE"

Дублювати дерево каталогів з $SOURCEдо$TARGET

find . -type d -exec mkdir -p "$TARGET{}" \;

Файли, що повторюються $SOURCEдля $TARGETпропуску кеш запису (але з використанням кеш - пам'яті для читання!)

find . -type f -exec dd if={} of="$TARGET{}" bs=8M oflag=direct \;

Зверніть увагу, що це не збереже час модифікації файлу, право власності та інші атрибути.