`tar` низкой производительности через` xargs`

Question

Пожалуйста, обратите внимание этот фрагмент:

tar -Oxvf archive.tgz | grep something

или это:

tar tf archive.tgz > /tmp/x && tar -Oxvf archive.tgz -T /tmp/x | grep something

против этого:

tar tf archive.tgz | xargs -I{} tar -Oxvf archive.tgz {} | grep something

Первые два sn Иппеты очень быстрые и схожие, в то время как третий - в 40 раз медленнее (этот индекс относится к содержимому архива, которое я предполагаю). Почему это?

Answer 1

Ключевым моментом здесь является использование вами -I{} в xargs. Страница человек говорит:

-I replace-str 

Замена вхождений заменить-Str в начально-аргументы с именами, прочитанных из стандартного ввода. Кроме того, некотируемые пробелы не прекращают ввод элементов; вместо этого разделитель является символом новой строки. Имплицирует -x и -L 1.

Подразумеваемое -L 1 делает xargs запустить ваш tar -Oxvf archive.tgz {} один раз для каждого файла в архиве, а не работает гудрона один раз, чтобы извлечь все файлы, перечисленные на xargs стандартного ввода.

Упрощенный пример разницы:

$ (echo foo; echo bar)|xargs -I{} echo {} 
foo 
bar 

$ (echo foo; echo bar)|xargs echo 
foo bar 

Исправлено:

tar tf archive.tgz | xargs tar -Oxvf archive.tgz | grep something 

Однако обратите внимание, что выход из этого не будет таким же, как то, что вы получите с помощью xargs -I{}, если имена файлов приведены в xargs не указаны в файле tar-файла (т.е. тот же порядок, что и tar t).Версия xargs -I{} будет загружать файлы в том порядке, в котором вы указали xargs, тогда как эта версия будет выводить их в файле tar-файла.

Answer 2

Я несколько не уверен, что вы хотите достичь своими примерами. Я не понимаю, что должен сделать первый канал в первом примере, так как вывод, который поступает во второй tar, не используется. A &&, казалось бы, лучший способ присоединиться к обеим командам (выполнить второй, только если первый был успешным). Кроме того, если вы используете полный список файлов для извлечения (и только для этой задачи), как в ваших примерах, нет необходимости проводить отдельный tar-запуск при его создании, поскольку tar по умолчанию будет извлекать все файлы, если не указано иное.

Что касается скорости, то смола на приемном конце трубы не имеет специальных средств, чтобы отличить, получает ли вход, который он получает, от другого деготь для оптимизации. Однако имеет значение то, что в случае двух tar-команд первый начнет свой вывод сразу, и, таким образом, второй tar может начать работать, в то время как xargs сначала соберут все данные, а затем запустит его вывод и канал после чего смонтирован.

Если вы ищете быстрый способ извлечь только подмножество файлов из архива tar и хотите выбрать по имени файла, я бы рекомендовал использовать star, в котором есть встроенная команда find.