diff рекурсивно каталог, ігноруючи всі двійкові файли

Робота над коробкою Fedora Constantine. Я переглядаю diffдва каталоги рекурсивно, щоб перевірити наявність змін у джерелі. Завдяки налаштуванню проекту (до мого власного залучення до цього проекту! Зітхання ), каталоги містять як джерело, так і двійкові файли, а також великі набори двійкових даних. Хоча різниця врешті-решт працює в цих каталогах, може знадобитися двадцять секунд, якби я міг ігнорувати двійкові файли.

Наскільки я розумію, diff не має режиму `` ігнорувати двійковий файл '', але має аргумент ігнорувати, який ігноруватиме регулярний вираз у файлі. Я не знаю, що там писати, щоб ігнорувати двійкові файли, незалежно від розширення.

Я використовую наступну команду, але вона не ігнорує двійкові файли. Хтось знає, як змінити цю команду для цього?

diff -rq dir1 dir2

Можливо, використовувати grep -I(що еквівалентно grep --binary-files=without-match) як фільтр для сортування двійкових файлів.

dir1='folder-1'
dir2='folder-2'
IFS=$'\n'
for file in $(grep -Ilsr -m 1 '.' "$dir1"); do
   diff -q "$file" "${file/${dir1}/${dir2}}"
done

Вид обману, але ось що я використав:

diff -r dir1/ dir2/ | sed '/Binary\ files\ /d' >outputfile

Це рекурсивно порівнює dir1 з dir2, sed видаляє рядки для двійкових файлів (починається з "Двійкові файли"), а потім перенаправляється у вихідний файл.

Я прийшов до цього (старого) запитання, шукаючи щось подібне (файли конфігурації на застарілому виробничому сервері порівняно з установкою apache за замовчуванням). Дотримуючись пропозиції @ fearlesstost у коментарях, gitє досить легким та швидким, що, мабуть, є більш простим, ніж будь-яка з наведених вище пропозицій. Скопіюйте версію1 у новий каталог. Тоді зробіть:

git init
git add .
git commit -m 'Version 1'

Тепер видаліть усі файли з версії 1 у цьому каталозі та скопіюйте версію 2 у каталог. Тепер зробіть:

git add .
git commit -m 'Version 2'
git show

Це покаже вам версію Git про всі відмінності між першим комітом і другим. Для двійкових файлів це просто скаже, що вони відрізняються. Крім того, ви можете створити гілку для кожної версії та спробувати об’єднати їх за допомогою інструментів злиття git.

Якщо імена довічних файлів в проекті по наступною схемою конкретної ( *.o, *.so, ...) , як вони зазвичай роблять, ви можете помістити ці шаблони в файл і вказати його з допомогою-X (дефіс X).

Зміст мого exclude_file

*.o
*.so
*.git

Команда:

diff -X exclude_file -r . other_tree > my_diff_file

ОНОВЛЕННЯ:

-xможе використовуватися замість -X, щоб вказати шаблони виключення в командному рядку, а не у файлі:

diff -r -x *.o -x *.so -x *.git dir1 dir2

Використовуйте комбінацію findта fileкоманди. Для цього потрібно провести певне дослідження результатів роботи fileкоманди у своєму каталозі; внизу я припускаю, що файли, які ви хочете розрізнити, повідомляються як ascii. АБО, використовуйте grep -vдля фільтрації двійкових файлів.

#!/bin/bash

dir1=/path/to/first/folder
dir2=/path/to/second/folder

cd $dir1
files=$(find . -type f -print | xargs file | grep ASCII | cut -d: -f1)

for i in $files;
do
    echo diffing $i ---- $dir2/$i
    diff -q $i $dir2/$i
done

Оскільки ви, мабуть, знаєте імена величезних двійкових файлів, розмістіть їх у хеш-масиві і виконуйте різницю лише тоді, коли файлу немає в хеші, приблизно так:

#!/bin/bash

dir1=/path/to/first/directory
dir2=/path/to/second/directory

content_dir1=$(mktemp)
content_dir2=$(mktemp)

$(cd $dir1 && find . -type f -print > $content_dir1)
$(cd $dir2 && find . -type f -print > $content_dir2)

echo Files that only exist in one of the paths
echo -----------------------------------------
diff $content_dir1 $content_dir2    

#Files 2 Ignore
declare -A F2I
F2I=( [sqlite3]=1 [binfile2]=1 )

while read f;
do
    b=$(basename $f)
    if ! [[ ${F2I[$b]} ]]; then
        diff $dir1/$f $dir2/$f
    fi
done < $content_dir1

Ну, як грубу перевірку, ви можете ігнорувати файли, що відповідають / \ 0 /.