Як я можу сповільнити rsync?

Я намагаюся скопіювати вміст несправного USB-накопичувача. Якщо я читаю дані занадто швидко, мікросхема контролера накопичувача перегрівається, а привід зникає з системи. Коли це станеться, мені потрібно вимкнути підключення диска, зачекати хвилину або близько того, щоб він охолонув, підключіть його назад і знову запустіть копію.

У мене є стара резервна копія вмісту диска, тому очевидним способом отримання решти даних є використання rsyncдля оновлення резервної копії, але це працює в цілому "читання занадто швидко, накопичувач зникає , і мені потрібно почати спочатку "випуск. Чи є спосіб сказати rsyncлише читання X мегабайт даних за хвилину? Як варіант, чи можна сказати йому призупиняти операції, коли накопичувач зникає, і продовжувати роботу, коли він знову підключається?

На відміну від досвіду DopeGhoti, --bwlimitпрапор обмежує передачу даних, моєю rsync (v3.1.2).

тест:

$ dd if=/dev/urandom bs=1M count=10 of=data
10+0 records in
10+0 records out
10485760 bytes (10 MB, 10 MiB) copied, 0.0871822 s, 120 MB/s

$ du -h data
10M     data

$ time rsync -q data fast
0.065 seconds

$ time rsync -q --bwlimit=1M data slow
10.004 seconds

(зауважте: мій timeвихідний вигляд відрізняється від більшості timeвикликів ( zshфункція); ті часи мене не редагували)

Інше, можливо, щось, що відповідає дублю -execв find. Я вважаю, що rsync -Rслід створити та скопіювати батьківські папки, але якщо це не так, то cp --parentsслід.

$ find /failing/usb -exec rsync -R {} /somewhere/safe/ \; -exec sleep 1 \;

Примітка : також перевірити ddrescue , це може бути правильно, що ви шукаєте :)

Трохи рішення MacGyver, але в минулому я мав успіх у цьому:
поставте старий USB 1 концентратор між палицею та комп'ютером. Ні в якому разі не скопіюйте так швидко :-)

Інша можливість: Якщо у вас є інша флешка, поставте її на інший порт USB, підключений до того ж кореневого концентратора (щоб він розділяв пропускну здатність з вашою проблемною палкою).
Тепер почніть велику операцію запису на додаткову палицю, щоб обидві палички змагалися за пропускну здатність. Для подальшого контролю ви можете використовувати ionice, щоб ще більше знизити пріоритет проблемної палички.

Ви можете використовувати rsync --bwlimit=RATEдля придушення швидкості передачі файлів, яка, виходячи з коментарів нижче, насправді спеціально працює, зменшуючи швидкість читання даних, саме це і потрібно.

Більше рішень, на додаток до rsync --bwlimit=100100 Кбіт / с.

1. Використовуйте ddrescueз --max-read-rateопцією для повного копіювання диска Це також дозволить вам перезапустити повну копію диска там, де вона відмовилася після помилки.

   ddrescue --max-read-rate=100K /failing/usb output.img output.logfile
   

ddrescueтакож є безліч інших варіантів, що стосуються відновлення даних, дивіться посібник тут .

2. Використовуйте pv("переглядач труб") з --rate-limitопцією або throttleінструментом для обмеження обмеження кількості труб. pvможе також показати прогрес. Ви можете зробити цю роботу для будь-якого інструменту, який використовує трубу або може використовувати трубу:

   tar -cf - /failing/usb | throttle -K 100 | tar -C /your/outputfolder/ -xvf -
   

   або

   tar -cf - /failing/usb | pv --rate-limit 100k | tar -C /your/outputfolder/  -xvf -
   

   Погляньте на сторінку ПВ для отримання додаткових налаштувань та прикладів. Тому що throttleви можете також спробувати -wваріант, який визначає, як обчислюється швидкість, дивіться сторінку набору дроселів .