使用awk或sed消除文本文件中的重复条目

Question

我有这样的文本文件......

apples
berries
berries
cherries

我希望它看起来像这样......

apples
berries
cherries

而已.我只想消除加倍的条目.我更喜欢这是一个awk或sed"单行",但如果有一些其他常见的bash工具,我忽略了,这将是好的.

Answer 1

sort -u file

如果你不担心输出的顺序.

通过保留订单删除重复项:

awk '!a[$1]++' file