Розділити файли за допомогою tar, gz, zip або bzip2 [закрито]

Мені потрібно стиснути великий файл розміром близько 17-20 ГБ. Мені потрібно розділити його на кілька файлів розміром близько 1 Гб на файл.

Я шукав рішення через Google і знаходив способи використання splitта catкоманд. Але вони не працювали для великих файлів взагалі. Крім того, вони не працюватимуть у Windows; Мені потрібно витягнути його на машині Windows.

Ви можете використовувати splitкоманду з -bопцією:

split -b 1024m file.tar.gz

Його можна знову зібрати на машині Windows, використовуючи відповідь @ Джошуа .

copy /b file1 + file2 + file3 + file4 filetogether

Редагувати : Як зазначено в коментарі нижче @Charlie, ви можете встановити префікс прямо, оскільки він буде використовуватись xінакше, що може заплутати.

split -b 1024m "file.tar.gz" "file.tar.gz.part-"

// Creates files: file.tar.gz.part-aa, file.tar.gz.part-ab, file.tar.gz.part-ac, ...

Редагувати : Редагування публікації, оскільки питання закрите, а найефективніше рішення дуже близьке до змісту цієї відповіді:

# create archives
$ tar cz my_large_file_1 my_large_file_2 | split -b 1024MiB - myfiles_split.tgz_
# uncompress
$ cat myfiles_split.tgz_* | tar xz

Це рішення дозволяє уникнути необхідності використовувати проміжний великий файл при (де) стисканні. Використовуйте опцію tar -C, щоб використовувати інший каталог для отриманих файлів. btw, якщо архів складається лише з одного файлу, можна уникати tar і використовувати лише gzip:

# create archives
$ gzip -c my_large_file | split -b 1024MiB - myfile_split.gz_
# uncompress
$ cat myfile_split.gz_* | gunzip -c > my_large_file

Для Windows ви можете завантажити перенесені версії тих же команд або використовувати cygwin.

Якщо ви відокремлюєтеся від Linux, ви все ще можете зібрати в Windows.

copy /b file1 + file2 + file3 + file4 filetogether

використовувати дьоготь, щоб розділити його на кілька архівів

є безліч програм, які працюватимуть з файлами tar на Windows, включаючи cygwin.

Тестований код спочатку створює один архівний файл, а потім розбиває його:

 gzip -c file.orig > file.gz
 CHUNKSIZE=1073741824
 PARTCNT=$[$(stat -c%s file.gz) / $CHUNKSIZE]

 # the remainder is taken care of, for example for
 # 1 GiB + 1 bytes PARTCNT is 1 and seq 0 $PARTCNT covers
 # all of file
 for n in `seq 0 $PARTCNT`
 do
       dd if=file.gz of=part.$n bs=$CHUNKSIZE skip=$n count=1
 done

Цей варіант не дозволяє створити єдиний архівний файл і переходить безпосередньо до створення частин:

gzip -c file.orig |
    ( CHUNKSIZE=1073741824;
        i=0;
        while true; do
            i=$[i+1];
            head -c "$CHUNKSIZE" > "part.$i";
            [ "$CHUNKSIZE" -eq $(stat -c%s "part.$i") ] || break;
        done; )

У цьому варіанті, якщо розмір файлу архіву ділиться на $CHUNKSIZE, то останній частковий файл матиме розмір файлу 0 байт.