Что быстрее, «найти -exec» или «найти | xargs -0 '?

Question

В моем веб-приложении я обрабатываю страницы с использованием PHP-скрипта, а затем генерирую из них статические HTML-файлы. Статический HTML предоставляется пользователям для повышения производительности. HTML-файлы в конечном итоге устаревают и их необходимо удалить.

Я обсуждаю между двумя способами написания сценария выселения.

Первый с помощью одной команды поиска, как

find /var/www/cache -type f -mmin +10 -exec rm \{} \; 

Вторая форма по конвейеру через xargs, что-то вроде

find /var/www/cache -type f -mmin +10 -print0 | xargs -0 rm 

Первая форма вызывает rm для каждого файла, он находит, а вторая форма просто отправляет все имена файлов в один rm (но список файлов может быть очень длинным).

Какая форма будет быстрее?

В моем случае каталог кеша разделяется между несколькими веб-серверами, поэтому все это делается по NFS, если это имеет значение для этой проблемы.

Answer 1

Я ожидаю, что версия xargs будет немного быстрее, так как вы не создаете процесс для каждого имени файла. Но я был бы удивлен, если бы на практике была большая разница. Если вас беспокоит длинный список xargs, отправляемый на каждый вызов rm, вы можете использовать -l с xargs, чтобы ограничить количество токенов, которые он будет использовать. Однако xargs знает самую длинную длину cmdline и не выходит за рамки этого.

Answer 2

версия xargs драматически быстрее с большим количеством файлов, чем -exec версии, как вы разместили ее, это происходит потому, что rm выполняется один раз для каждого файла вы хотите удалить, в то время как xargs будет сваливать столько файлов, как возможно вместе в одну команду rm.

С десятками или сотнями тысяч файлов это может быть разница между минутой или меньше в сравнении с большей частью часа.

Вы можете получить такое же поведение с помощью -exec, выполнив команду «+» вместо «\;». Этот параметр доступен только в более поздних версиях find.

Следующие два примерно эквивалентны:

find . -print0 | xargs -0 rm 
find . -exec rm \{} + 

Обратите внимание, что версия xargs будет по-прежнему работать немного быстрее (на несколько процентов) в системе с несколькими процессорами, потому что некоторые работы можно распараллелить. Это особенно верно, если задействовано множество вычислений.

Answer 3

Команда find имеет встроенную опцию -delete, возможно, она также может быть полезна? http://lists.freebsd.org/pipermail/freebsd-questions/2004-July/051768.html