logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

在idea中编译运行scala程序时出现错误:Exception in thread "main" java.lang.ArrayIndexOutOfBoundsException: 10582

原因:这是paranamer版本的问题。解决办法:在pom.xml文件中的spark-core / spark-sql之前添加以下依赖项<dependency><groupId>com.thoughtworks.paranamer</groupId><artifactId>paranamer</a...

Hadoop配置文件详解(core-site.xml、hdfs-site.xm、mapred-site.xml、yarn-site.xml)

Hadoop可配置参数详解配置文件名配置对象主要内容core-site.xml集群全局参数用于定义系统级别的参数,如HDFSURL、Hadoop的临时目录等hdfs-site.xmlHDFS参数如名称节点和数据节点的存放位置、文件副本的个数、文件读取权限等mapred-sit..

#hadoop#hdfs#mapreduce
到底了