logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

storage memory是什么意思,如何计算得出的

但是查看GC日志发现,oldgen的内存大小是固定的,但是eden、from和to的大小是动态变化的。storage memory,虽然名字看起来是存储内存的大小,但实际上由于spark1.6之后已经实现了统一内存管理(即执行内存和存储内存使用同一个统一内存),所以storage memory实际上是统一内存的大小,是sparkSQL中我们设置spark.executor.memory和spark

文章图片
#spark
到底了