
简介
该用户还未填写简介
擅长的技术栈
未填写擅长的技术栈
可提供的服务
暂无可提供的服务
在虚拟机使用idea sbt工程本地模式运行spark wordcount程序,报错Module ‘Main‘ production: sbt.internal.inc.CompileFailed
小知识分享:sparkContext.textFIle()中,总的来说有两个参数,分别是文件的路径和最小分区数,文件的路径可以是文档、文件夹、一个包含多个文件路径的列表和使用通配符来匹配多个文件。同样,分区数也不应该太大,否则可能会导致每个分区过小,增加调度开销。记住更改完后,记得点击图右上角的我用红框标注的地方,开始导入我们所需的依赖,这里需要同学们有耐心,因为在虚拟机中导入慢,idea反应慢,

到底了








