shell第一列相同即判断为重复,取其中一条数据
来源:互联网 发布:好学近乎知原文 编辑:程序博客网 时间:2024/05/16 09:37
例如 123456.txt内容如下
90115601,2137786735 36684
90115601,2137786735 36684
90118301,17751822 34898
90145133,2050186877 3847
90145133,2050186877 3847
90151825,3580430507 37974
90151825,3580430507 37974
90188754,2987861307 24533
90188754,2987861307 24533
910910,1303405168 1855
910910,514876016 1555
991314,1879979639 49504
991314,4119267805 50922
998008,1453233015 13818
取第一条数据
tac 123456.txt |awk -F, '!a[$1]++' |sort -t"," -k1
取最后一条数据
cat 123456.txt |awk -F, '!a[$1]++' |sort -t"," -k1
0 0
- shell第一列相同即判断为重复,取其中一条数据
- sql查询-多条数据相同,取其中一条
- repeater纵向重复显示数据,即第一列为字段,第二、三、四。。列重复显示数据
- Oracle去除重复(某一列的值重复),取最新(日期字段最新)的一条数据
- JAVA将Id相同数据中重复列转化成一条
- 删除两条相同数据中的其中一条记录
- sql数据分组重复的取一条
- oracle数据重复,只取一条
- oracle 数据重复,只取一条
- js javaScript array 取指定元素索引、判断是否相同、重复、过滤数据
- 删除完全一样的重复数据, 保留其中一条
- mysql查找数据库重复数据,保留其中一条
- sql中多条重复数据只更新其中一条
- pgsql:删除表中重复数据保留其中的一条
- 【数据库SQL】找到会员卡重复的,保留其中一条数据
- sql查询:某列中含两条相同数据,只取一条
- Oracle查询一批数据,某字段的内容有重复数据,怎样取相同的记录中时间最近的一条
- 取每一列的第一条数据
- 白泽安全团队简介
- Android自定义View实现垂直时间轴布局
- maven使用详解
- 浅谈Http协议(1)
- LeetCode No.477 TotalHammingDistance
- shell第一列相同即判断为重复,取其中一条数据
- 开源库 Natasha2016 ,让IL编程跑起来
- 【Hadoop】Flume-ng源码解析之启动流程
- java中字符串中大于小于号的转义替换
- Socket编写一个简易的聊天室(相关知识点的总结)
- ArrayList和LinkedList的区别
- 深入学习SSH框架《三:Servlet中配置过滤器Filter和异步过滤器》
- git 使用指导
- 图形的逻辑思维题分类以及思路