Чи можна побачити швидкість cp та скопійовані відсотки?

У мене виникають проблеми при копіюванні великих файлів за допомогою nautilus (він застрягає). Мені потрібно копіювати, використовуючи cp. Мені хотілося б знати, чи є параметри, які показують% скопійованого, а також швидкість передачі.

rsyncмає прапор, progress2який називається загальним відсотком:

rsync --info=progress2 source dest

Якщо ви дозволяєте інші інструменти, ніж cpце, безумовно, можливо. Для одного файлу ви можете використовувати pv. Це невеликий інструмент, який забезпечує приємну статистику.

pv inputfile > outputfile

Якщо у вас є кілька файлів або каталогів, ви можете використовувати tar:

tar c sourceDirectory | pv | tar x -C destinationDirectory

Ви можете загорнути його у функцію оболонки. Вводити менше, і ви отримуєте семантику, близьку до тієї, що в cp. Ось дуже проста (і не помилка!) Функція:

cpstat () {
  tar c "$1" | pv | tar x -C "$2"
}

Зауважте, що деякі версії tarне підтримують згаданий синтаксис (наприклад, Solaris tar), і вам доведеться використовувати наступний варіант:

cpstat () {
  tar cf - "$1" | pv | (cd "$2";tar xf -)
}

Ви називаєте це так

cpstat sourceDirectory destinationDirectory

Ви можете додатково покращити його, щоб pvзабезпечити оцінку часу, що залишився.

Іншим рішенням (як згадується в коментарі frostschutz) є використання rsync з --progressопцією:

rsync --progress -a sourceDirectory destinationDirectory

rsync найкраще показує прогрес під час копіювання.

колишній:

rsync -avh --progress sourceDirectory destinationDirectory

Як пояснено в інших відповідях, cp не забезпечує цю функціональність. Однак прогрес (який раніше називався cv) - це невеликий інструмент, який дуже допомагає забезпечити цю відсутність функції.

Цей інструмент можна описати як Tiny Dirty Linux Only * C команда, яка шукає основні команди coreutils (cp, mv, dd, tar, gzip / gunzip, cat, ...), що працюють у вашій системі та відображає відсоток скопійованих дані.

Я використовую його протягом останніх кількох місяців, і це солідно.

Чи можна побачити швидкість cp та скопійовані відсотки?

Так, можна відобразити хід виконання команди cpна терміналі.

Спосіб №1: (використання progress)

Відкрийте новий термінал і введіть progressйого, щоб відобразити хід виконання cpкоманди та інших команд, таких як:

cp, mv, dd, tar, cat, rsync, grep, fgrep, egrep, cut, sort, md5sum, sha1sum, sha224sum, sha256sum, sha384sum, sha512sum, adb, gzip, gunzip, bzip2, bunzip2, xz, unxz, lzma, unlzma, 7z, zcat, bzcat, lzcat, split, gpg

Якщо ви не встановили progress, ви можете встановити його зі сховищ, наприклад , в CentOSцій команді: yum -y install progress.

Потім після запуску cpкоманди у фоновому режимі або після cpнормального запуску відкрийте інший термінал, тому просто спробуйте виконати цю команду:

# progress -m

Дивіться вихід:

[30904] cp /home/user/file.mp4
        2.3% (200.9 MiB / 8.4 GiB) 3.6 MiB/s remaining 0:38:58

Спосіб №2: (використовувати патч cp)

Або скачайте GNU coreutilsта приклейте його.

cd /tmp
wget http://ftp.gnu.org/gnu/coreutils/coreutils-8.21.tar.xz
tar -xvJf coreutils-8.21.tar.xz
cd coreutils-8.21
wget https://raw.githubusercontent.com/atdt/advcpmv/master/advcpmv-0.5-8.21.patch
patch -p1 -i advcpmv-0.5-8.21.patch

Виконати:

export FORCE_UNSAFE_CONFIGURE=1
./configure
make

Скопіюйте два файли cpта mvперейдіть coreutils-8.21/src/до /usr/local/bin:

cp src/cp /usr/local/bin/cp
cp src/mv /usr/local/bin/mv

Або скопіюйте його за допомогою свого менеджера файлів як root

Додайте до свого рядка такі рядки ~/.bashrc:

alias cp='cp -gR'
alias mv='mv -g'

Вихід та вхід

Індикатор може відображатися без –gабо –progress-barв відповідно до рекомендацій автора

Дивіться вихід:

0 files copied so far...                                              194.4 MiB /   8.4 GiB
[||--------------------------------------------------------------------------------]  2.3 %
Copying at   3.3 MiB/s (about 0h 5m 47s remaining)
/home/user/file.mp4                                                   194.4 MiB / 446.1 MiB
[||||||||||||||||||||||||||||||||||||----------------------------------------------] 43.6 %

Джерело: linuxhelp

Помітили, що ця публікація була дещо старою. Але коли я вирішив вирішити це питання, я подумав, що опублікую своє рішення.

Сценарій: У нас дуже велика структура каталогів, яку ми хочемо скопіювати, тому ми видаємо команду cp -R sourcedir destdir в одному вікні терміналу.

Відкрийте інше вікно терміналу або відсуньте процес на другий план (Ctrl+Z,bg<CR>), тоді давайте зробимо індикатор прогресу способом гетто:

Ми спочатку отримуємо загальний розмір структури каталогів, яку ми хочемо скопіювати, ви робите це за допомогою:

du -sh /path/sourcedirectory/

Перетворіть результат у гігабайти (G), а потім замініть n на результат, який ви отримали у змінному sourceize. Після того, як ви вставили sourceize та destdir (каталог призначення), запустіть команду нижче.

while true; do sourcesize=n destdir=/path/destinationdirectory/ copyprogress="$(export | du -sh $destdir | awk '{print $1}' | sed 's/[^0-9.]*//g' )" ; echo "scale=3 ; $copyprogress / $sourcesize * 100" | bc | xargs echo -n ; echo % completed ; sleep 10 ; done

Це надрукує прогрес кожні 10 секунд повідомленнями типу:

0.100% completed
0.200% completed
0.300% completed 
... etc

Я знаю, що це рішення не стосувалося швидкості копіювання, але можна було б додати, розширивши команди вище, можливо, перетворивши його на скрипт bash, щоб було легше читати. Наприклад, перевіривши, скільки даних скопійовано pr. n одиниці часу, швидкість повинна бути тривіальною для обчислення та відображення.

Щоб покращити відповідь Марко, сьогодні я написав цю версію cpstat, тому ви можете скопіювати багато каталогів і використовувати останній параметр як шлях до місця призначення. Зауважте, що якщо ви використовуєте відносний глибокий шлях як джерело, ви можете, завдяки tar, автоматично створити те саме залежне дерево каталогів.

function cpstat () {

    tar -cf - "${@: 1: $#-1}" |
    pv -s "$( du -cs -BK --apparent-size "${@: 1: $#-1}" |
              tail -n 1 |
              cut -d "$(echo -e "\t")" -f 1)" |
    ( cd "${@: $#}"; tar -xf - )

;}

Не в стандартній версії cp.

Ви можете фон cp та перелічити розмір, очікуючи cpзакінчення.

Я використовую цей Perl для моніторингу росту одного файлу, але він працює зовнішньо до cp (або що ще я роблю)

Я знайшов це для використання, працював чудово:

sudo watch lsof -p`pgrep -x cp`

з коментаря Майка на питання, як перевірити хід запуску cp

Незважаючи на те, що rsyncви дасте певну статистику прогрес, якщо ви хочете використовувати панель прогресу, ви повинні використовувати pv.

Ви можете використовувати cpvобгортку pvз більш простим синтаксисом, більш подібним до того, cpякий ви можете використовувати для рекурсивного копіювання каталогів

Ви можете отримати його тут

Використання такого інструмента mc(командир опівночі) може бути хорошим варіантом для інших відповідей.

Це простий файловий менеджер, який показує вам прогрес копіювання / переміщення.

dd status=progress

Додана опція у GNU Coreutils 8.24+ (Ubuntu 16.04):

dd if=src of=dst status=progress

Stdout - це періодично оновлюваний рядок типу:

462858752 bytes (463 MB, 441 MiB) copied, 38 s, 12,2 MB/s

Дивіться також: Як Ви відстежуєте хід ДД? | Запитайте Ubuntu

Ще одне просте рішення - просто дивитися вихідну папку наступним чином:

Linux / Cygwin: watch -n 10 --differences du -sk --apparent-size <WATCHED_FOLDER>

FreeBSD: gnu-watch -n 10 --differences du -sk <WATCHED_FOLDER>

Ця зручна утиліта запустить duта виділить відмінності.

Ще одним потенційним рішенням було б написати простий скрипт, який циклізує, викликуючи duі виплюнувши приблизну оцінку пропускної здатності.

Цей інструмент являє собою команду утиліти Linux, яка шукає основні команди coreutils (cp, mv, dd, tar, gzip / gunzip, cat тощо), що працюють у вашій системі та відображає відсоток скопійованих даних:

https://github.com/Xfennec/cv

У мене просто був випадок, коли cp був більш-менш заблокований через помилку FUSE у приймальній файловій системі.

Якщо ви не можете просто перейти з cp (тобто тому, що --sparse = завжди) і хочете щось, що насправді є надійним для прогресу, перейдіть через / proc.

Every 2.0s: cat /proc/20977/io                                                      Thu Sep 28 04:08:57 2017

rchar: 268573800
wchar: 268500992
syscr: 4112
syscw: 4097
read_bytes: 268697600
write_bytes: 0
cancelled_write_bytes: 0

VCP - копіюйте файли в інтерфейс curses (Показуйте панель прогресу в Linux).

ОПИС: vcp копіює файли та каталоги в інтерфейс curses, доступний лише текст. його параметри та вихід схожі з процесором BSD, додаючи нові функції.

Він надає інформацію про:

• файли скопійовано та залишено для копіювання
• записані дані та загальний розмір даних
• дані записуються щосекунди
• два рядки стану, на одному відображається поточний статус файлу, інший загальний статус (крім 1 файлу, обидва показують поточний) та відсоток

коли вихід надсилається на консоль:

• рядок стану
• розмір скопійовано та швидкість

Довідкова сторінка VCP: https://linux.die.net/man/1/vcp

Завантажте vcp-2.2.tar.gz з:

http://distfiles.gentoo.org/distfiles/vcp-2.2.tar.gz

Залежність: curses.h (libncurses-dev).

На Ubuntu встановіть:

sudo apt-get install libncurses-dev

або

sudo apt-get install libncurses5-dev

ВСТАВКА vcp:

make && make install

Посібник:

man vcp