shell 删除重复行

来源:互联网 发布:淘宝修改器安卓版 编辑:程序博客网 时间:2024/05/18 03:25

1. sort+awk


[root@hadoop usr]# sort te.txt | awk '{if($0!=pro){print $0;pro=$0}}'
AIR
BUS
HOTEL
MEETING
TRAIN


2.sort+uniq

[root@hadoop usr]# sort te.txt |uniq
AIR
BUS
HOTEL
MEETING
TRAIN

3. sed


原创粉丝点击