rsync виключити відповідно до .gitignore & .hgignore & svn: ігнорувати як --filter =: C

Rsync включає в себе чудовий варіант --cvs-exclude"ігнорувати файли так само, як це робить CVS", але CVS вже застаріли роками. Чи є якийсь спосіб зробити так само виключення файлів, які сучасні системи контролю версій (Git, Mercurial, Subversion) ігнорували б?

Наприклад, у мене є багато проектів Maven, перевірених у GitHub. Зазвичай вони включають в себе .gitignoreщонайменше список target, каталог за замовчуванням Maven build (який може бути присутнім на верхньому рівні або в підмодулях). Оскільки вміст цих каталогів повністю одноразовий, і він може бути набагато більшим, ніж вихідний код, я хотів би виключити їх при використанні rsync для створення резервних копій.

Звичайно, я можу явно, --exclude=target/але це випадково придушить не пов'язані між собою каталоги, які просто трапляються названими targetі не повинні ігноруватися.

І я міг би надати повний список абсолютних шляхів для всіх імен файлів та зразків, згаданих у будь-якому .gitignore, .hgignoreабо svn:ignoreвластивості на моєму диску, але це був би величезний список, який повинен був би бути створений за допомогою якогось сценарію.

Оскільки rsync не має вбудованої підтримки для оформлення замовлень VCS, окрім CVS, чи є якийсь хороший трюк для її подачі їх моделей ігнорування? Або якась система зворотного виклику, за якою в сценарію користувача можна запитати, чи повинен бути вказаний файл / каталог чи ні?

Оновлення : --filter=':- .gitignore'як вважає LordJavac, здається, працює також добре для Git, як --filter=:Cі для CVS, принаймні на прикладах, які я знайшов, хоча незрозуміло, чи синтаксис точно відповідає. --filter=':- .hgignore'не дуже добре працює для Mercurial; наприклад, що .hgignoreмістить рядок типу ^target$(Mercurial еквівалент Git /target/) rsync не розпізнає як регулярний вираз. І, здається, ніщо не працює для Subversion, для якої вам доведеться розібратися .svn/dir-prop-baseв робочій копії 1.6 або попередньої версії, і з жахом кинути руки на робочу копію 1.7 або пізнішої версії.

Як згадував luksan, це можна зробити за допомогою --filterпереключення на rsync. Я домігся цього за допомогою --filter=':- .gitignore'(перед ".gitignore") є пробіл, який говорить rsyncпро об'єднання каталогів з .gitignoreфайлами та їх виключення за правилами git. Ви також можете додати свій глобальний файл ігнорування, якщо у вас є. Щоб полегшити використання, я створив псевдонім, до rsyncякого входив фільтр.

Ви можете використовувати git ls-filesдля створення списку файлів, виключених з файлів сховища .gitignore. https://git-scm.com/docs/git-ls-files

Параметри:

• --exclude-standardРозглянемо всі .gitignoreфайли.
• -o Не ігноруйте нестандартні зміни.
• -i Виводити лише ігноровані файли.
• --directory Вивести шлях до каталогу лише у випадку, якщо весь каталог проігноровано.

Єдине, що мені залишилося ігнорувати, було .git.

rsync -azP --exclude=.git --exclude=`git -C <SRC> ls-files --exclude-standard -oi --directory` <SRC> <DEST>

як щодо rsync --exclude-from='path/.gitignore' --exclude-from='path/myignore.txt' source destination?
Це працювало для мене.
Я вірю, що ти можеш мати і більше --exclude-fromпараметрів.

Рішення 2018 року підтверджено

rsync -ah --delete 
    --include .git --exclude-from="$(git -C SRC ls-files \
        --exclude-standard -oi --directory >.git/ignores.tmp && \
        echo .git/ignores.tmp')" \
    SRC DST 

Деталі: --exclude-fromобов'язкові замість --exclude, оскільки ймовірний випадок, що виключає список, не буде аналізуватися як аргумент. Виключити з потрібного файлу та не може працювати з трубами.

Поточне рішення зберігає файл виключення всередині папки .git, щоб переконатися, що це не вплине git status, зберігаючи його самостійно. Якщо ви хочете, можете використовувати / tmp.

Для ртутний можна використовувати

hg status -i | sed 's/^I //' > /tmp/tmpfile.txt

зібрати список файлів, які НЕ перебувають під контролем ртутного контролю через обмеження .hgignore, а потім запустіть

rsync -avm --exclude-from=/tmp/tmpfile.txt --delete source_dir/ target_dir/

для rsync всіх файлів, крім ігнорованих. Зауважте -m прапор у rsync, який виключатиме синхронізацію порожніх каталогів, оскільки статус hg -i перераховуватиме лише виключені файли, не dirs

Спробуйте це:

rsync -azP --delete --filter=":- .gitignore" <SRC> <DEST>

Він може скопіювати всі файли у віддалений каталог, за винятком файлів у ".gitignore", та видалити файли, які не є у вашому поточному каталозі.

На rsyncголовній сторінці, крім стандартного списку шаблонів файлів:

Файли, перелічені в $ HOME / .cvsignore, додаються до списку та будь-які файли, перелічені у змінній середовища CVSIGNORE

Отже, мій файл $ HOME / .cvsignore виглядає так:

.git/
.sass-cache/

щоб виключити .git та файли, створені Sass .

У мене було кілька дуже великих .gitignoreфайлів, і жодне з "чистих рісинсистентських" рішень не працювало на мене. Я написав цей скрипт для обгортки rsync , він повністю дотримується .gitignoreправил (включаючи !-style винятки та .gitignoreфайли у підкаталогах) і працює як шарм для мене.

Перегляньте розділ ПРАВИЛА ФІЛЬТУ МЕРГ-ФАЙЛІВ у rsync (1).

Схоже, що можна створити правило rsync --filter, яке буде включати файли .gitignore у міру проходження структури каталогів.

Замість створення фільтрів виключення, ви можете git ls-filesвибрати для вибору кожного файлу rsync:

#!/usr/bin/env bash

if [[ ! $# -eq 2 ]] ; then
    echo "Usage: $(basename $0) <local source> <rsync destination>"
    exit 1
fi

cd $1
versioned=$(git ls-files --exclude-standard)
rsync --verbose --links --times --relative --protect-args ${versioned} $2

Це працює, навіть незважаючи на те, що git ls-filesповертає шляхи, розділені за новою лінією Можливо, не вийде, якщо ви переобладнали файли з пробілами у файлах файлів.

Альтернативи:

git ls-files -zi --exclude-standard |rsync -0 --exclude-from=- ...

git ls-files -zi --exclude-per-directory=".gitignore" |...

(rsync лише частково розуміє .gitignore)

Коротка відповідь

rsync -r --info=progress2 --filter=':- .gitignore' SOURCE DEST/

Значення параметрів:

-r: рекурсивна

--info=...: показати прогрес

--filter=...: виключити за правилами, переліченими у файлі .gitignore