拆分大文件的脚本

来源:互联网 发布:ubuntu root 权限不够 编辑:程序博客网 时间:2024/04/28 01:52

有时候需要把一个大文件拆分成几个小文件,由于生产系统上没有split程序,因此自己写了两个脚本来实现该功能。

第一个脚本根据行数来拆分:

#! /bin/bash#filename my-line-split.sh#usage: my-line-split.sh 行数 bigfile#拆分的文件以bigfile.split.1 bigfile.split.2...命名split_line=$1file=$2total_line=$(wc -l <$file)prefix=$file.split.i=1begin_line=1while [ $begin_line -le $total_line ]do    end_line=$(echo "$begin_line+$split_line-1" |bc)    sed "$begin_line,$end_line!d" $file >$prefix$i    i=$(echo "$i+1" |bc)    begin_line=$(echo "$end_line+1"|bc)done

第二个脚本根据字节数来拆分

#! /bin/bash#filename my-byte-split.sh#usage: my-byte-split.sh 字节数 bigfile#拆分的文件以bigfile.split.1 bigfile.split.2...命名split_line=$1file=$2total_line=$(wc -l <$file)prefix=$file.split.i=1begin_line=1while [ $begin_line -le $total_line ]do    end_line=$(echo "$begin_line+$split_line-1" |bc)    sed "$begin_line,$end_line!d" $file >$prefix$i    i=$(echo "$i+1" |bc)    begin_line=$(echo "$end_line+1"|bc)done


0 0
原创粉丝点击