常用命令
来源:互联网 发布:快消品行业数据 编辑:程序博客网 时间:2024/06/04 19:31
进入/关闭安全模式
hdfs dfsadmin -safemode enter/leave
上传文件到hdfs
bin/hadoop fs -put /home/hadoop/spark-1.6.2/lib/*.jar
查看hdfs中的文件
bin/hadoop fs -ls /
查看hbase元数据状态
hbase hbck
修复hbase元数据表
hbase hbck -fixMeta
重新将hbase元数据表分给regionserver
hbase hbck -fixAssignments
开启Thriftserver
hbase-daemon.sh start thrift/thrift2
查看zookeeper日志
zkServer.sh start-foreground
进入zookeeper客户端
bin/zkCli.sh -server 192.168.6.187:2181ls /hbase/table
创建zookeeper的hbase实例
create /hbase myhbase
进入mysql
mysql -uhive -phive
查看mysql状态
service mysql status(root登录)
开启mysql服务
service mysql start
开启hive元数据服务
bin/hive --service metastore &
开启hiveserver2服务
bin/hive --service hiveserver2 &spark连接hive时,需要Hive端同时开启hiveserver2服务和metastore服务
查看metastore
jobs
连接hiveserver2客户端
bin/beeline -u 'jdbc:hive2://192.168.6.186:10000/silence1101;principal=hadoop/namenode@SILENCE.COM'
启动sparksql
bin/spark-sql
启动spark shell
bin/spark-shell
启动sparksql同时需要连接上hive
bin/spark-sql --master yarn --jars /home/hadoop/spark2.0.2/lib/mysql-connector-java-5.1.34.jar
向spark提交任务
bin/spark-submit --master spark:namenode:7077 --executor-memory 2g --num-executors 3 /home/hadoop/spark-1.6.2/sbin/Spark_Select.jar
kerberos申请票据
kinit -k -t /home/hadoop/hdfs.keytab hadoop/datanode1@SILENCE.COM
查询mongodb数据
db.getCollection('speeches').find({'_id':/AiKa/}).limit(5)
阅读全文
0 0
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 常用命令
- 查看自己生日是否在pi中
- dfs hdu 1016 Prime Ring Problem 素数环
- 利用JAVA求定积分
- op分析
- pcl1.8.0+vs2015配置安装【小白入门与遇到过的问题解决】
- 常用命令
- 冒泡,选择,插入排序
- python绘图---matplotlib几个简单例子
- 2017年最新JRebel+Eclipse热部署教程
- 盘点8种CSS实现垂直居中水平居中的绝对定位居中技术
- c 十进制、十六进制和BCD的相互转换
- 图的遍历
- 喷水装置(一)
- POJ