logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

启动spark任务报错:ERROR SparkUI: Failed to bind SparkUI

       当启动一个spark任务的时候,就会占用一个端口,默认为4040,从日志可以看到当端口被占用时,它会默认依次增加16次到4056,如果还是失败的话,就会报错退出。解决方法:1. 使用spark-submit提交任务时,在脚本中加配置:--conf spark.port.maxRetries=128(亲测有效)2. 在代码中初始化SparkConf时,设置conf.se...

#java#spark
centos7安装mysql8.0

目录准备工作下载安装1、上传文件2、安装组件3、初始化4、修改密码准备工作检查是否之前安装有mysql:rpm -qa | grep -i mysql检查是否安装有mariadb:rpm -qa | grep mariadb若有安装,需先卸载。卸载mysql:参考教程:https://blog.csdn.net/our_times/article/details/98882701卸载mariadb

#mysql
启动spark任务报错:ERROR SparkUI: Failed to bind SparkUI

       当启动一个spark任务的时候,就会占用一个端口,默认为4040,从日志可以看到当端口被占用时,它会默认依次增加16次到4056,如果还是失败的话,就会报错退出。解决方法:1. 使用spark-submit提交任务时,在脚本中加配置:--conf spark.port.maxRetries=128(亲测有效)2. 在代码中初始化SparkConf时,设置conf.se...

#java#spark
到底了