配置环境变量，在/etc/profile文件中添加以下内容并重新加载配置文件(source /etc/profile)进入spark/conf配置目录新建spark-env.sh文件(vim spark-env.sh)并加入以下内容。将下载好的压缩包传入虚拟机的安装路径，本文章为/soft目录。进入spark安装目录输入以下内容成功返回pi的值则配置成功。

可能是服务器找不到Driver导致的，在服务器的host配置你Driver电脑的映射可能解决问题，这里我是云服务器，没在一个局域网且没有公网ip所以放弃远程提交改用命令行提交。技术力有限，如果有更好的结局方案请留言，不胜感激。spark on yarn 读取hdfs拒绝连接。

idea远程提交spark on yarn出现问题代码报错信息连接超时，防火墙已关闭，端口开放，重启hdfs后还是无法解决，捣鼓了很久在百度后再次查看日志在后面的报错中找到这么一串信息连接datanode使用的是私网ip，难怪连接不到，配置外网访问datanode就可以了。

设置sparkconf的"spark.yarn.jars"属性后解决第一个为你的jar包名称，第二个为spark依赖的jar包目录。spark on yarn idea远程提交报错，查看8088日志发现。