hadoop之grep
来源:互联网 发布:pk10源码 编辑:程序博客网 时间:2024/06/06 17:03
hadoop streaming -D stream.non.zero.exit.is.failure=false ...
#!/bin/shisdebug=falseSTREAMING=/home/work/software/hadoop/contrib/streaming/hadoop-streaming.jarHADOOP=/home/work/software/hadoop/bin/hadoopinput_path=$1output_path=/home/user1/tmpecho "$HADOOP fs -rmr $output_path"$HADOOP fs -rmr $output_pathecho "$HADOOP jar $STREAMING -D mapred.reduce.tasks=1 -D mapred.job.priority=VERY_HIGH -D mapred.job.name='sunlin-s:grep' -input $input_path -output $output_path -mapper 'egrep \"$2\"' "$HADOOP jar $STREAMING -D mapred.reduce.tasks=1 -D mapred.job.priority=VERY_HIGH -D mapred.job.name='grep' -D stream.non.zero.exit.is.failure=false -D mapred.max.split.size=800000000 -input $input_path -output $output_path -mapper "egrep '$2'"exit 0
usage: sh grep.sh to_grep_path grep_str
- hadoop之grep
- hadoop学习笔记之grep
- Hadoop Streaming 实战: grep
- Hadoop Streaming 实战: grep
- Hadoop Streaming —— grep
- Hadoop 类Grep源代码注释
- 正则表达式之grep
- linux之grep
- linux命令之grep
- 正则表达式之grep
- 正则表达式之grep
- 正则表达式之grep
- linux 命令之grep
- 正则表达式之grep
- linux命令之grep
- linux命令之grep
- Linux常用命令之grep
- Linux学习之grep
- Chrome开发,debug的使用方法。
- Windchill 10.0 安装遇到的问题
- Winform中使用Castle操作SQL2008实现添加记录
- 软件开发各阶段交付物列
- Ubuntu 12.10 禁用guest账户和remote login,启用root登录
- hadoop之grep
- bseg 问题解决
- 如何在Linux系统下检测U盘是否已连接
- 一个服务器搭多个tomcat导致session丢失,或者同一个IP不同端口,多个应用的session会冲突解决方法
- BX和BP指示偏移地址时有何不同?
- 各种方法解决ASP.NET中的乱码问题
- 零基础编程者初学python须知
- 成熟到优秀的瓶颈问题
- 20_Hibernate入门