Используйте утилиты оболочки для эквивалента группы SQL в файле CSV

Question

У меня есть CSV-файл, где самый левый столбец содержит поле идентификатора. Есть ли умный способ использовать любые служебные программы, такие как sed, чтобы найти идентификаторы, которые используются более одного раза?

Answer 1

Если вам нужны только идентификаторы, тогда вы можете попробовать

cut -d "," -f $NUM | sort -n | uniq -d

, где $NUM - номер поля, содержащего идентификатор.Команда cut извлечет список идентификаторов, а команда uniq покажет только те, которые дублированы.