linux数据文件统计常用命令

1、sed /NULL/d tongji3.log //行匹配删除，凡是行中含有null的都删掉

2、多个分隔符同时去分割字段

awk -F '[,_]' '{sum+=$2;count+=1} END{print "SUM:"sum"\nAVG:"sum/count}' tongji30.log

3、
awk -F '_' '{print > "tongji2.log" }' tongji1.log

4、统计文件行数
wc -l secondcol.data  文件名