Shell常用
来源:互联网 发布:常州新一代造价软件 编辑:程序博客网 时间:2024/04/30 16:00
1、批量替换文本
sed -i '/^$/d' *.sql #删除空行sed -i 's/,//g' *.sql sed -i 's/^M//g' *.sql #需要替换^M 或sed -i 's/\r//g' *.sqlsed -i 's/[ \t]*$//g' *.sql #删除行尾空白sed -i 's/$/,/g' *.sql sed -i '1 s/,//g' *.sql #第一行sed -i '$ s/,//g' *.sql #最后一行tac test.txt #反转内容
2、
sort: sort -t , -n +1 -2 -o b.avl ABD_VGOP2-R2.12-01_20090116_990001.AVL sort -n -r -k 1 date.csv cat log.csv | awk -F"_" '{print $2}' | cut -c0-8 | sort | uniq -c > day.csv
3、awk -F'","' '{print $1"|||",$2"|||",$5"|||",$4"|||",$6"|||",$7"|||",$8"|||",$9"|||",$10"|||",$11"|||",$12"|||",$13"|||",$14"|||",$15}' i_20090314_VGOP2-R2.10-51302_01_001.dat > a.dat
替换:sed 's/x01/,/g' a.dat>b.dat
4、转换字符集:iconv -c -f GB18030 -t UTF-8 b.dat>c.dat
5、解压缩
unzip a.zip
6、批量替换文件名 rename 20120717 20120809 *.dat
7、 grep -i dwa_m04_pop_phy_ord_det_basic_sum_da *.tcl | awk -F ":" '{print $1}' | sort | uniq
8、杀hadoop进程 jps | grep -v Jps | awk '{print $1}' | xargs kill -9
9、远程杀进程 ssh slave1 "ps -ef | grep impala | grep -v grep | awk '{print $2}' | xargs kill -9"
10、时间加减
date +%Y%m%d //显示前天年月日date +%Y%m%d --date="+1 day" //显示前一天的日期date +%Y%m%d --date="-1 day" //显示后一天的日期date +%Y%m%d --date="-1 month" //显示上一月的日期date +%Y%m%d --date="+1 month" //显示下一月的日期date +%Y%m%d --date="-1 year" //显示前一年的日期date +%Y%m%d --date="+1 year" //显示下一年的日期
11、sed 's/1\x0109\>//g' b.csv #去掉09结尾
12、 awk -F"\x01" 'OFS="\x01"{$NF="";$(NF-1)="";print}' b.csv | sed 's/\x01$//g' > d.csv #去掉最后两列
13、find apps/ -name "*.sql" | xargs -i grep -i Time_type {} #查找文件并过滤
- 常用shell
- 常用shell
- 常用shell
- Shell常用
- 常用shell
- 常用shell
- 常用shell
- 常用shell
- [shell]Shell常用特殊符号
- shell常用知识总结
- 几个常用SHELL命令
- 常用SHELL(BASH)例子
- 常用Shell操作符
- 常用Shell快捷键
- Linux Shell常用技巧
- Shell常用指令
- Linux常用shell命令
- Linux常用shell命令
- shell test命令用法
- android项目开发过程中 常使用的工具
- 关于无法启动Task Scheduler 服务的通用解决方案
- c++语法小知识2
- 分布式定时任务框架-Elastic Job
- Shell常用
- C++程序设计思维导图
- iOS开发之xib技巧介绍
- win8.1x64 + PHP +PDO + Oracle + IIS
- Android使用Ant打包所遇到问题的解决方法
- 杭电1716排列2 stl
- Java位运算
- wget获取https地址时加入--no-check-certificate
- CentOS下安装python-mysqldb