Linux shell用法和技巧

原文出处： techbar   译文出处： 外刊IT评论

使用Linux shell是我每天的基本工作，但我经常会忘记一些有用的shell命令和l技巧。当然，命令我能记住，但我不敢说能记得如何用它执行某个特定任务。于是，我开始在一个文本文件里记录这些用法，并放在我的Dropbox里，现在，向大家分享这个文件。这个文件我会不断的更新。需要注意一点的是，有些用法需要在你的原文出处： techbar   译文出处： 外刊IT评论

使用Linux shell是我每天的基本工作，但我经常会忘记一些有用的shell命令和l技巧。当然，命令我能记住，但我不敢说能记得如何用它执行某个特定任务。于是，我开始在一个文本文件里记录这些用法，并放在我的Dropbox里，现在，向大家分享这个文件。这个文件我会不断的更新。需要注意一点的是，有些用法需要在你的Linux系统里安装额外的软件。

UPDATE: November 25, 2013

检查远程端口是否对bash开放：

1

echo>/dev/tcp/8.8.8.8/53&& echo"open"

让进程转入后台：

1

Ctrl + z

将进程转到前台：

fg

产生随机的十六进制数，其中n是字符数：

1

openssl rand -hex n

在当前shell里执行一个文件里的命令：

1

source/home/user/file.name

截取前5个字符：

1

${variable:0:5}

SSH debug 模式：

1

ssh-vvv user@ip_address

SSH with pem key：

1

sshuser@ip_address -i key.pem

用wget抓取完整的网站目录结构，存放到本地目录中：

1

wget -r --no-parent --reject "index.html*"http://hostname/-P /home/user/dirs

一次创建多个目录：

1

mkdir-p /home/user/{test,test1,test2}

列出包括子进程的进程树：

1

psaxwef

创建 war 文件：

1

jar -cvf name.war file

测试硬盘写入速度：

1

ddif=/dev/zeroof=/tmp/output.img bs=8k count=256k; rm-rf /tmp/output.img

测试硬盘读取速度：

1

hdparm -Tt /dev/sda

获取文本的md5 hash：

1

echo-n "text"| md5sum

检查xml格式：

1

xmllint --noout file.xml

将tar.gz提取到新目录里：

1

tarzxvf package.tar.gz -C new_dir

使用curl获取HTTP头信息：

1

curl -I http://www.example.com

修改文件或目录的时间戳(YYMMDDhhmm)：

1

touch-t 0712250000 file

用wget命令执行ftp下载：

1

wget -m ftp://username:password@hostname

生成随机密码(例子里是16个字符长)：

1

LANG=c < /dev/urandomtr -dc_A-Z-a-z-0-9 | head-c${1:-16};echo;

快速备份一个文件：

1

cpsome_file_name{,.bkp}

访问Windows共享目录：

1

smbclient -U "DOMAIN\user"//dc.domain.com/share/test/dir

执行历史记录里的命令(这里是第100行)：

1

!100

解压：

1

unzip package_name.zip -d dir_name

输入多行文字(CTRL + d 退出)：

1

cat> test.txt

创建空文件或清空一个现有文件：

1

> test.txt

与Ubuntu NTP server同步时间：

1

ntpdate ntp.ubuntu.com

用netstat显示所有tcp4监听端口：

1

netstat-lnt4 | awk'{print $4}' | cut-f2 -d: | grep-o '[0-9]*'

qcow2镜像文件转换：

1

2

qemu-img convert -f qcow2 -O raw precise-server-cloudimg-amd64-disk1.img \

                                 precise-server-cloudimg-amd64-disk1.raw

重复运行文件，显示其输出（缺省是2秒一次）：

1

watchps -ef

所有用户列表：

1

getentpasswd

Mount root in read/write mode:

1

mount-o remount,rw /

挂载一个目录（这是不能使用链接的情况）：

1

mount--bind /source/destination

动态更新DNS server:

1

2

3

4

nsupdate < <EOF

update add $HOST 86400 A $IP

send

EOF

递归grep所有目录：

1

grep-r "some_text"/path/to/dir

列出前10个最大的文件：

1

lsof/ | awk'{ if($7 > 1048576) print $7/1048576 "MB "$9 }' | sort-n -u | tail

显示剩余内存(MB)：

1

free-m | grepcache | awk'/[0-9]/{ print $4" MB" }'

打开Vim并跳到文件末：

1

vim + some_file_name

Git 克隆指定分支(master)：

1

git clone [e-mail]:name/app.git -b master

Git 切换到其它分支(develop)：

1

git checkout develop

Git 删除分支(myfeature)：

1

git branch -d myfeature

Git 删除远程分支：

1

git push origin :branchName

Git 将新分支推送到远程服务器：

1

git push -u origin mynewfeature

打印历史记录中最后一次cat命令：

1

!cat:p

运行历史记录里最后一次cat命令：

1

!cat

找出/home/user下所有空子目录：

1

find /home/user -maxdepth 1-type d -empty

获取test.txt文件中第50-60行内容：

1

< test.txt sed -n '50,60p'

运行最后一个命令(如果最后一个命令是mkdir /root/test, 下面将会运行: sudo mkdir /root/test)：

1

sudo !!

创建临时RAM文件系统 – ramdisk (先创建/tmpram目录)：

1

mount-t tmpfs tmpfs /tmpram-o size=512m

Grep whole words:

1

grep -w "name"test.txt

在需要提升权限的情况下往一个文件里追加文本：

1

echo"some text" | sudo tee -a /path/file

列出所有kill signal参数：

1

kill -l

在bash历史记录里禁止记录最后一次会话：

1

kill-9 $$

扫描网络寻找开放的端口：

1

nmap -p 8081 172.20.0.0/16

设置git email:

1

git config --global user.email "[e-mail]"

To sync with master if you have unpublished commits:

1

git pull --rebase origin master

将所有文件名中含有”txt”的文件移入/home/user目录：

1

find -iname "*txt*"-exec mv -v {} /home/user \;

将文件按行并列显示：

1

pastetest.txt test1.txt

shell里的进度条：

1

pv data.log

使用netcat将数据发送到Graphite server:

1

echo"hosts.sampleHost 10 `date +%s`" | nc 192.168.200.23000

将tabs转换成空格：

1

expandtest.txt > test1.txt

Skip bash history:

1

< space >cmd

去之前的工作目录：

1

cd -

拆分大体积的tar.gz文件(每个100MB)，然后合并回去：

1

2

split–b 100m /path/to/large/archive/path/to/output/files

catfiles* > archive

使用curl获取HTTP status code:

1

curl -sL -w "%{http_code}\\n"www.example.com -o /dev/null

设置root密码，强化MySQL安全安装：

1

/usr/bin/mysql_secure_installation

当Ctrl + c不好使时：

1

Ctrl + \

获取文件owner:

1

stat -c %U file.txt

block设备列表：

1

lsblk -f

找出文件名结尾有空格的文件：

1

find . -type f -exec egrep -l " +$" {} \;

找出文件名有tab缩进符的文件：

1

find. -typef -execegrep -l $'\t'{} \;

用”=”打印出横线：

1

printf'%100s\n' | tr' ' =

Linux系统里安装额外的软件。

UPDATE: November 25, 2013

检查远程端口是否对bash开放：

1

echo>/dev/tcp/8.8.8.8/53&& echo"open"

让进程转入后台：

1

Ctrl + z

将进程转到前台：

fg

产生随机的十六进制数，其中n是字符数：

1

openssl rand -hex n

在当前shell里执行一个文件里的命令：

1

source/home/user/file.name

截取前5个字符：

1

${variable:0:5}

SSH debug 模式：

1

ssh-vvv user@ip_address

SSH with pem key：

1

sshuser@ip_address -i key.pem

用wget抓取完整的网站目录结构，存放到本地目录中：

1

wget -r --no-parent --reject "index.html*"http://hostname/-P /home/user/dirs

一次创建多个目录：

1

mkdir-p /home/user/{test,test1,test2}

列出包括子进程的进程树：

1

psaxwef

创建 war 文件：

1

jar -cvf name.war file

测试硬盘写入速度：

1

ddif=/dev/zeroof=/tmp/output.img bs=8k count=256k; rm-rf /tmp/output.img

测试硬盘读取速度：

1

hdparm -Tt /dev/sda

获取文本的md5 hash：

1

echo-n "text"| md5sum

检查xml格式：

1

xmllint --noout file.xml

将tar.gz提取到新目录里：

1

tarzxvf package.tar.gz -C new_dir

使用curl获取HTTP头信息：

1

curl -I http://www.example.com

修改文件或目录的时间戳(YYMMDDhhmm)：

1

touch-t 0712250000 file

用wget命令执行ftp下载：

1

wget -m ftp://username:password@hostname

生成随机密码(例子里是16个字符长)：

1

LANG=c < /dev/urandomtr -dc_A-Z-a-z-0-9 | head-c${1:-16};echo;

快速备份一个文件：

1

cpsome_file_name{,.bkp}

访问Windows共享目录：

1

smbclient -U "DOMAIN\user"//dc.domain.com/share/test/dir

执行历史记录里的命令(这里是第100行)：

1

!100

解压：

1

unzip package_name.zip -d dir_name

输入多行文字(CTRL + d 退出)：

1

cat> test.txt

创建空文件或清空一个现有文件：

1

> test.txt

与Ubuntu NTP server同步时间：

1

ntpdate ntp.ubuntu.com

用netstat显示所有tcp4监听端口：

1

netstat-lnt4 | awk'{print $4}' | cut-f2 -d: | grep-o '[0-9]*'

qcow2镜像文件转换：

1

2

qemu-img convert -f qcow2 -O raw precise-server-cloudimg-amd64-disk1.img \

                                 precise-server-cloudimg-amd64-disk1.raw

重复运行文件，显示其输出（缺省是2秒一次）：

1

watchps -ef

所有用户列表：

1

getentpasswd

Mount root in read/write mode:

1

mount-o remount,rw /

挂载一个目录（这是不能使用链接的情况）：

1

mount--bind /source/destination

动态更新DNS server:

1

2

3

4

nsupdate < <EOF

update add $HOST 86400 A $IP

send

EOF

递归grep所有目录：

1

grep-r "some_text"/path/to/dir

列出前10个最大的文件：

1

lsof/ | awk'{ if($7 > 1048576) print $7/1048576 "MB "$9 }' | sort-n -u | tail

显示剩余内存(MB)：

1

free-m | grepcache | awk'/[0-9]/{ print $4" MB" }'

打开Vim并跳到文件末：

1

vim + some_file_name

Git 克隆指定分支(master)：

1

git clone [e-mail]:name/app.git -b master

Git 切换到其它分支(develop)：

1

git checkout develop

Git 删除分支(myfeature)：

1

git branch -d myfeature

Git 删除远程分支：

1

git push origin :branchName

Git 将新分支推送到远程服务器：

1

git push -u origin mynewfeature

打印历史记录中最后一次cat命令：

1

!cat:p

运行历史记录里最后一次cat命令：

1

!cat

找出/home/user下所有空子目录：

1

find /home/user -maxdepth 1-type d -empty

获取test.txt文件中第50-60行内容：

1

< test.txt sed -n '50,60p'

运行最后一个命令(如果最后一个命令是mkdir /root/test, 下面将会运行: sudo mkdir /root/test)：

1

sudo !!

创建临时RAM文件系统 – ramdisk (先创建/tmpram目录)：

1

mount-t tmpfs tmpfs /tmpram-o size=512m

Grep whole words:

1

grep -w "name"test.txt

在需要提升权限的情况下往一个文件里追加文本：

1

echo"some text" | sudo tee -a /path/file

列出所有kill signal参数：

1

kill -l

在bash历史记录里禁止记录最后一次会话：

1

kill-9 $$

扫描网络寻找开放的端口：

1

nmap -p 8081 172.20.0.0/16

设置git email:

1

git config --global user.email "[e-mail]"

To sync with master if you have unpublished commits:

1

git pull --rebase origin master

将所有文件名中含有”txt”的文件移入/home/user目录：

1

find -iname "*txt*"-exec mv -v {} /home/user \;

将文件按行并列显示：

1

pastetest.txt test1.txt

shell里的进度条：

1

pv data.log

使用netcat将数据发送到Graphite server:

1

echo"hosts.sampleHost 10 `date +%s`" | nc 192.168.200.23000

将tabs转换成空格：

1

expandtest.txt > test1.txt

Skip bash history:

1

< space >cmd

去之前的工作目录：

1

cd -

拆分大体积的tar.gz文件(每个100MB)，然后合并回去：

1

2

split–b 100m /path/to/large/archive/path/to/output/files

catfiles* > archive

使用curl获取HTTP status code:

1

curl -sL -w "%{http_code}\\n"www.example.com -o /dev/null

设置root密码，强化MySQL安全安装：

1

/usr/bin/mysql_secure_installation

当Ctrl + c不好使时：

1

Ctrl + \

获取文件owner:

1

stat -c %U file.txt

block设备列表：

1

lsblk -f

找出文件名结尾有空格的文件：

1

find . -type f -exec egrep -l " +$" {} \;

找出文件名有tab缩进符的文件：

1

find. -typef -execegrep -l $'\t'{} \;

用”=”打印出横线：

1

printf'%100s\n' | tr' ' =