Поиск awk (или sed) острота для удаления строк из вывода, если первое поле является дубликатом.
Пример для удаления дублирующихся строк, которые я видел:
awk 'a !~ $0; {a=$0}'
Испытанное использование его для основания без удачи (я думал, изменяя 0$ на $1, добьется цели, но, казалось, не работало).
awk '{ if (a[$1]++ == 0) print $0; }' "$@"
Это стандартное (очень простое) использование ассоциативных массивов.