SHELL/VIM删除重复行(去重)
来源:互联网 发布:js遍历文件夹 编辑:程序博客网 时间:2024/06/05 01:20
为自己复习使用,拿来主义,感谢前人!
shell 删除重复行为:
cat 文件名 | sort | uniq
其中:
-c或——count:在每列旁边显示该行重复出现的次数;
-d或–repeated:仅显示重复出现的行列;
-f<栏位>或–skip-fields=<栏位>:忽略比较指定的栏位;
-s<字符位置>或–skip-chars=<字符位置>:忽略比较指定的字符;
-u或——unique:仅显示出一次的行列;
-w<字符位置>或–check-chars=<字符位置>:指定要比较的字符。
删除重复行:
uniq file.txt sort file.txt | uniq sort -u file.txt
只显示单一行:
uniq -u file.txt sort file.txt | uniq -u
统计各行在文件中出现的次数:
sort file.txt | uniq -c
在文件中找出重复的行:
sort file.txt | uniq -d
来自: http://man.linuxde.net/uniq
无耻的分割线~~~~~~~~~~~~~~~~~~~~
当然在vim中我们也可以删除重复行
:sort //可以直接排序,这个太好用了:g/^\(.*\)$\n\1$/d //去除重复行
当然vim的正则是门大学问,正常情况下awk即可
其中g是全局的意思,其他的均为正则。
来自http://bbs.51cto.com/thread-964013-1.html
0 0
- SHELL/VIM删除重复行(去重)
- vim 去重复行
- 去重删除重复的行,只留一条
- rowid去重(删除表的重复记录)
- shell 删除重复行
- Vim之删除重复行
- sql基础--怎样去除重复的行(去重)
- sql记录去重(SQL查询或者删除表中重复记录)
- Oracle数据库中重复数据删除方法:完全去重
- Oracle数据库中重复数据删除方法:部分去重+完全去重
- Oracle数据库中重复数据删除方法:部分去重+完全去重
- PHP 二维数据去重复值方法(去重)
- shell去重
- shell 排序 去重
- vim删除重复行的函数
- vim 删除文本文件中的重复行
- 【笔记】vim如何删除重复行
- 去重,重复的去掉
- 游戏策划
- 基于SharePoint Server的权限模型设计
- [DFT] DC 自动识别Shift Registers
- 认识less
- windows桌面双击可执行java脚本
- SHELL/VIM删除重复行(去重)
- 一点就通:学会dpkg 命令管理 Debian 系的 Linux系统
- 阿里云服务器ECS centos7.2搭建nginx环境以及负载均衡
- 策划
- HTML5<audio>标签--音频播放全解析
- node + express 中ejs页面中文乱码问题
- Android Studio多渠道打包
- 多个DataTable表合并(相同结构与不同结构)
- C++递归: