按列消除部分重复的行并保留最后一行

Question

我有一个看起来像这样的文件:

2011-03-21 name001 line1
2011-03-21 name002 line2
2011-03-21 name003 line3
2011-03-22 name002 line4
2011-03-22 name001 line5

对于每个名字,我只想要它的最后一次出现.所以,我希望结果如下:

2011-03-21 name003 line3
2011-03-22 name002 line4
2011-03-22 name001 line5

有人可以用bash/awk/sed给我一个解决方案吗？

Answer 1

此代码通过第二个字段获取uniq行,但是从文件或文本的末尾(如结果示例中)

tac temp.txt | sort -k2,2 -r -u

Answer 2

awk '{a[$2]=$0} END {for (i in a) print a[i]}' file

如果出现顺序很重要:

• 基于第一次出现:

  awk '!a[$2] {b[++i]=$2} {a[$2]=$0} END {for (i in b) print a[b[i]]}' file
  

• 基于上次出场:

  tac file | awk '!a[$2] {b[++i]=$2} {a[$2]=$0} END {for (i in b) print a[b[i]]}'
  

Answer 3

sort < bar > foo
uniq  < foo > bar

bar现在没有重复的行