之前在使用spark operator的时候必须指定executor的个数，在将任务发布到spark operator后，k8s会根据指定的个数启动executor，但是对于某些spark sql可能并不需要用到那么多executor，在此时executor的数量就不好控制了。根据pod启动的时间可以看出，先生成了2个executor，在16s后又生成了1个，最后完成，可以看出executor确实

最近team内对k8s,docker比较感兴趣，想了解CI/CD相关的内容，我争取了该任务，做了些相关的工作，研究了大概一个礼拜，初步完成了从gitlab代码提交用docker自动发布版本的工作（还未涉及k8s），在此记录一 涉及到的软件版本版本介绍docker19.03.8不知道的不用往下看了git2.28.0 windows分布式版本控制系统gitlab12.5.5一个用于仓库管理系统的开源项

做了k8s集群服务，免不了后端session共享的问题，此文简单记录tomcat+redis存储session的实现共享的操作。首先说明tomcat8的问题，我原来的tomcat版本是8，在网络上找了很多文章也尝试了操作的很多方法，结果证明tomcat8的redis session共享集成还存在问题，不能成功，因此还是别无他法的改成tomcat7.1）redis服务要起来，这里redis的安装启动

同上篇文章，上篇文章使用了两个镜像presto coordinator和worker，这篇文章展示只用一个镜像，并且动态配置presto参数的情况一。 镜像打包首先删除presto中内存参数，jvm参数的设置文件。保留hive的链接文件（这里hive的链接也可以配置动态，因为hive的链接不会经常变动，所以直接打在镜像里）接下去编写Dockerfile,与前面类似FROM pythonMAINTA