logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

flink on yarn模式下的,flink中的slot,taskmanage,parallelism,以及yarn中的container,vcore,memory它们之间的关系

第一点yarn集群上同时能跑多少任务是有限定的,这个限定就是yarn上的vcore和memory这两个参数。但是它是可以根据你的配置文件可以调的,修改yarn-site.xml文件中的(这个是yarn默认的,就算不配置也是这样)<property><name>yarn.nodemanager.resource.cpu-vcores</n...

#yarn
kafka系列之kafka各个版本的区别

kafka的版本比较多大致有0.7、0.8、0.9、0.10、0.11、1.0 和 2.0,其中的小版本和 Patch 版本很多下面分别岁这些版本的特性跟大家讲解下0.7,0.8版本这是最早开源时的“上古”版本了,以至于我也从来都没有接触过。这个版本只提供了最基础的消息队列功能,甚至连副本机制都没有,我实在想不出有什么理由你要使用这个版本,因此一旦有人向你推荐这个版本,果断走开就好了。Kaf...

到底了