ソートしないで重複行を削除する - Qiita

uniq コマンドは事前にデータをソートしておく必要がありますが、ソートされていないデータから重複する行を削除したいこともありますよね。そんなときは これだけです。 解説 a は連想配列の変数で名前は何でもいいです $0 には行全体が格納されています つまり各行をキーとする連想配列を作成し、同じ行が現れるたびに値をインクリメントします ! により値が 0 のとき、つまり最初にその行が現れたときだけ条件が真になります アクション部分は省略されているので行全体が表示されます Register as a new user and use Qiita more conveniently You get articles that match your needsYou can efficiently read back useful informationYou can use dark them

[iww]

awkで重複除去。 $1を使えば先頭の要素をキーとして重複除去できる

[tech-kazuhisa]

“awk '!a[$0]++' FILE”

[cknbstr]

この発想はなかった

[kns_1234]

便利。これだけだと保存されないので後ろに > 1.txt とか付ける必要あり

[koj-isls-lil]

awk sed