logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

k8s部署spark,多台宿主机pod里面driver端口不通问题

现在环境是 k8s 部署了jupyterlab,jupyterlab里面启动pyspark或者spark-shell命令,会由于driver端口回调问题而在yarn任务日志里面报错。一种方式是完全定死ip和端口,一种方式是在代码或者yaml里面动态的获取部分代码如下<dependency><groupId>io.kubernetes</groupId><a

k8s exec 进不去容器

总是报一个错误信息:error: unable to upgrade connection: unable to read error from server response解决方法:调度到的机器网络有问题,修改pod的调度策略,调度到一台合适的机器上,解决!

到底了