Как я могу сделать операцию «копировать, если изменено»?

Я хотел бы скопировать набор файлов из каталога A в каталог B с оговоркой, что если файл в каталоге A идентичен файлу в каталоге B, этот файл не должен копироваться (и, следовательно, время его модификации не должно быть обновлено). Есть ли способ сделать это с помощью существующих инструментов, без написания собственного сценария?

Чтобы немного рассказать о моем сценарии использования: я автоматически .cгенерирую группу файлов во временном каталоге (методом, который должен генерировать все из них безоговорочно), и когда я их заново генерирую, я хотел бы только скопировать те, которые превратились в фактический исходный каталог, оставляя неизменными (с их старым временем создания), чтобы makeзнать, что не нужно их перекомпилировать. (Однако не все сгенерированные файлы являются .cфайлами, поэтому мне нужно делать двоичные сравнения, а не текстовые сравнения.)

(Примечание: это выросло из вопроса, который я задал на https://stackoverflow.com/questions/8981552/speeding-up-file-comparions-with-cmp-on-cygwin/8981762#8981762 , где я пытался чтобы ускорить файл сценария, который я использовал для выполнения этой операции, но мне пришло в голову, что я действительно должен спросить, есть ли лучший способ сделать это, чем написание собственного сценария - тем более, что любой простой способ сделать это в оболочке скрипт будет вызывать что-то вроде cmpкаждой пары файлов, и запуск всех этих процессов занимает слишком много времени.)

rsync, вероятно, лучший инструмент для этого. У этой команды много опций, поэтому прочитайте man-страницу . Я думаю, что вы хотите параметр --checksum или --ignore-times

Вы можете использовать -uпереключатель, чтобы cpпонравиться так:

$ cp -u [source] [destination]

Со страницы руководства:

   -u, --update
       copy only when the SOURCE file is newer than the destination file or 
       when the destination file is missing

В то время как использование rsync --checksumявляется хорошим общим способом «копировать, если изменено», в вашем конкретном случае есть еще лучшее решение!

Если вы хотите избежать ненужной перекомпиляции файлов, вы должны использовать ccache, который был создан именно для этой цели! Фактически, это не только позволит избежать ненужных перекомпиляций ваших автоматически сгенерированных файлов, но также ускорит процесс, когда вы это сделаете, make cleanи перекомпилируете с нуля.

Затем я уверен, что вы спросите: "Это безопасно?" Ну да, как указывает сайт:

Это безопасно?

Да. Самый важный аспект кэша компилятора - всегда выводить один и тот же вывод, что и настоящий компилятор. Это включает в себя предоставление точно таких же объектных файлов и точно таких же предупреждений компилятора, которые будут выдаваться, если вы используете настоящий компилятор. Единственный способ узнать, что вы используете ccache - это скорость.

И его легко использовать , просто добавив его в качестве префикса в CC=строке вашего make-файла (или вы можете использовать символические ссылки, но способ make-файла, вероятно, лучше).

Это должно делать то, что вам нужно

diff -qr ./x ./y | awk '{print $2}' | xargs -n1 -J% cp % ./y/

Где:

• х ваша обновленная / новая папка
• y - место назначения, в которое вы хотите скопировать
• awk будет принимать второй аргумент каждой строки из команды diff (может быть, вам понадобятся некоторые дополнительные вещи для имен файлов с пробелом - не можете попробовать сейчас)
• xargs -J% вставит имя файла в cp в нужном месте

Мне нравится использовать унисон в пользу, rsyncпотому что он поддерживает несколько мастеров, уже настроив мои ключи ssh и vpn отдельно.

Так что в моем crontab только одного хоста я позволяю им синхронизироваться каждые 15 минут:

* / 15 * * * * [-z "$ (pidof unison)"] && (время ожидания 25м в унисон -sortbysize -ui text -batch -times / home / master ssh: //192.168.1.12//home/master -path dev -logfile /tmp/sync.master.dev.log) &> /tmp/sync.master.dev.log

Тогда я могу развиваться с любой стороны, и изменения будут распространяться. Фактически для важных проектов у меня есть до 4 серверов, отражающих одно и то же дерево (3 запускают унисон из cron, указывая на тот, который не работает). На самом деле, Linux и Cygwin хосты смешаны - за исключением того, что не ожидают смысла в мягких ссылках в win32 вне среды cygwin.

Если вы идете по этому пути, сделайте начальное зеркало на пустой стороне без -batch, т.е.

unison -ui text  -times /home/master ssh://192.168.1.12//home/master -path dev

Конечно, есть конфигурация для игнорирования файлов резервных копий, архивов и т.д .:

 ~/.unison/default.prf :
# Unison preferences file
ignore = Name {,.}*{.sh~}
ignore = Name {,.}*{.rb~}
ignore = Name {,.}*{.bak}
ignore = Name {,.}*{.tmp}
ignore = Name {,.}*{.txt~}
ignore = Name {,.}*{.pl~}
ignore = Name {.unison.}*
ignore = Name {,.}*{.zip}

    # Use this command for displaying diffs
    diff = diff -y -W 79 --suppress-common-lines

    ignore = Name *~
    ignore = Name .*~
    ignore = Path */pilot/backup/Archive_*
    ignore = Name *.o

Хотя rsync --checksumэто правильный ответ, обратите внимание, что эта опция несовместима --timesи --archiveвключает в себя --times, так что если вы хотите rsync -a --checksum, вам действительно нужно rsync -a --no-times --checksum.