shell脚本
来源:互联网 发布:卖数据的网站 编辑:程序博客网 时间:2024/05/29 05:10
shell脚本--linux终端运行hadoop--java文件
假设保存为test.sh,java文件为wc.java,【注:会打包成1.jar】,main函数所在类为wc,hdfs上输入目录地址为input,hdfs上输出目录地址为output【注:输入目录和输出目录非必须】 www.ahlinux.com
运行:
./test.sh wc.java wc input output
[plain]
#!/bin/bash
#echo "$# $0 $1 $2"
HH=$HADOOP_HOME
if [ $# -lt 2 ];then
echo "usage: jc.sh source.java ClassName [InputFile] [OutputFile]"
exit 0
elif [ ${1##*.} != "java" ];then
echo "Notice: source.java java!"
exit 0
else
rm -r ./classes/*
javac -classpath $HH/hadoop-mapred-0.22.0.jar:$HH/hadoop-hdfs-0.22.0.jar:$HH/hadoop-common-0.22.0.jar:$HH/lib/commons-cli-1.2.jar -d classes ./$1
jar -cvf 1.jar -C classes/ .
echo "==============Output====================="
if [ $# -eq 2 ];then
hadoop jar 1.jar $2
elif [ $# -eq 3 ];then
hadoop jar 1.jar $2 $3
elif [ $# -eq 4 ];then
hadoop jar 1.jar $2 $3 $4
fi
echo "========================================="
rm 1.jar
fi
- 本文来自:Linux学习网
- shell脚本
- shell脚本
- shell脚本
- shell脚本
- shell脚本
- shell脚本
- shell脚本
- shell 脚本
- SHELL 脚本
- shell脚本
- shell脚本
- shell 脚本
- shell脚本
- shell脚本
- shell脚本
- shell脚本
- shell脚本
- shell脚本
- KVC 与 KVO
- [Unity3d] [图文]【寻路】 Waypoint 与 NavMesh 比较(转)
- js 学习面向对象的继承
- 使用getIdentifier()获取资源Id 通过资源名称获取资源id
- JavaScript高级编程(学习笔记)
- shell脚本
- hdu1242
- 找到有问题的进程,并在紧急情况下杀掉
- Uncaught RangeError: Maximum call stack size exceeded
- 清空mysql数据
- JSON.parse()和JSON.stringify()
- MyiOS开发篇 --iOS 各机型参数 Xcode个版本 sdk
- 使用 CAS 在 Tomcat 中实现单点登录
- C++隐式类型转换