предотвращения дублирования переменной и печати с использованием AWK о

Question

Я переборе файл и печать набор значений с использованием AWK

echo $value | awk ' {print $4}' >> 'some location' 

команда отлично работает, но я хочу, чтобы предотвратить повторяющиеся значения хранятся в файле

Заранее спасибо.

Answer 1

Вместо обработки файла строка за строкой, вы должны использовать одну команду AWK для всего файла

Например:

awk '!a[$4]++{print $4}' file >> 'some location' 

будет держать только уникальные значения в четвертом столбце

Answer 2

Использование только одного экземпляра awk, как предложено пользователем000001, безусловно, правильно, и поскольку в вопросе задается очень мало деталей, это чистое предположение, но самым простым решением может быть тривиальная рефа ctor вашей петли. Например, если текущий код:

while ...; do 
    ... 
    echo $value | awk ... 
    ... 
done 

Вы можете просто изменить его на:

while ...; do 
    ...  
    echo $value >&5 
    ... 
done 5>&1 | awk '!a[$4]++{print $4}' >> /p/a/t/h 

Обратите внимание, что, хотя это «просто» исправить с точки зрения кода, чтобы изменить, почти конечно, не правильное исправление! Удаление полного цикла while и просто использование awk - это правильная вещь.