简介
该用户还未填写简介
擅长的技术栈
未填写擅长的技术栈
可提供的服务
暂无可提供的服务
k8s部署spark,多台宿主机pod里面driver端口不通问题
现在环境是 k8s 部署了jupyterlab,jupyterlab里面启动pyspark或者spark-shell命令,会由于driver端口回调问题而在yarn任务日志里面报错。一种方式是完全定死ip和端口,一种方式是在代码或者yaml里面动态的获取部分代码如下<dependency><groupId>io.kubernetes</groupId><a
k8s exec 进不去容器
总是报一个错误信息:error: unable to upgrade connection: unable to read error from server response解决方法:调度到的机器网络有问题,修改pod的调度策略,调度到一台合适的机器上,解决!
到底了