Чому git так повільний для великих файлів?

Я намагався використовувати git для управління своїми фотографіями (резервне копіювання / фотографування). Вся бібліотека - кілька Гб. Більшість файлів - це JPG-файли розміром 2-3М. Коли я додавав файли в сховище, здавалося, це зайняло кілька днів. Використання процесора завжди було майже 100%.

Чи є причина, чому git має бути повільним на великих файлах?

ps Я знаю, що git не призначений для цього.

git

— ліси
джерело

Git за замовчуванням стискає файли. JPEG за замовчуванням уже стиснуті. Це не великі файли, це стислі файли.

Ви помітите той же ефект, додавши ZIP-файли до сховища git.

EDIT: На /programming/7102053/git-pull-without-remotely-compressing-об'єкти про стиснення є цікава тема .

— Громада
джерело

Як я можу сказати git не стискати файли? Мені не обов’язково потрібна космічна ефективність. Я хочу, щоб це було якомога швидше. Дякую!

— Вундінг

Є безліч комутаторів, з якими можна грати git config, включаючи core.compressionта pack.window. Бачачи, як я ніколи насправді не намагався запустити git без стиснення, YMMV. Будь ласка, опублікуйте те, що ви відкрили, щоб допомогти нам усім засвоїти свій досвід.

@Eroen, ти добре зазначаєш. Я проголосував за ваш коментар.

Git також робить (і перевіряє) ша1 хеш кожного файлу кожного разу, коли він його використовує, що також може зайняти деякий час для великих файлів.

— Eroen

@RandolphWest: Добре, але неправильно. стиснення zlib можна відключити $ git set core.compression 0. sha1 - це десятки MiB в секунду, але вони можуть погано перешкоджати низьким умовам пам'яті.

— Ероен