去掉csv第一行

来源:互联网 发布:迪士尼乐园全套源码 编辑:程序博客网 时间:2024/05/16 05:25

在用MR或Spark处理较大的csv文件时,经常会遇到这么一个问题,csv文件的第一行往往是列名,怎么办呢?

我有一个简单的方法

sed 1d dual.txt > noheader.txt  

用sed 1d就可以把dual.txt文件的第一行去掉,>是指将前面的命令的结果覆盖到noheader.txt,>>就是追加了。
0 0
原创粉丝点击