idea配置spark开发环境时产生的错误总结

来源:互联网 发布:caffe 多标签训练 编辑:程序博客网 时间:2024/06/06 01:53

错误一

null>bin>winutils.exe not found

这种情况下只是需要winutils.exe文件即可,不需要下载所有hadoop
winutils.exe下载链接
然后放在hadoop/bin文件夹下,环境变量加上HADOOP_HOME

错误二

build Artifacts时报错java.lang.outofmemoryerror

这里写图片描述

配置时output,因为运行环境中已经有相关包,所以其他包删除,只保留’compile output’那一项,这时再build就不会内存溢出

错误三

run时报错java.lang.outofmemoryerror

这里写图片描述

在run configuration中的VM options中-Xms256m -Xmx1024m
这时再build就不会内存溢出

0 0
原创粉丝点击