logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Map和Reduce 个数如何确定

基于org.apache.hadoop.mapreduce包新版API一、Map1、Map个数的确定map的个数等于split的个数。我们知道,mapreduce在处理大文件的时候,会根据一定的规则,把大文件划分成多个,这样能够提高map的并行度。划分出来的就是InputSplit,每个map处理一个InputSplit.因此,有多少个InputSplit,就有多少个map数。2、谁负责...

es重启后索引丢失问题

原因:es重启后data目录发生变化(不清楚是误操作还是之前有人改过配置导致),重启后在es节点根目录下新创建了data目录,所以找不到索引。处理方法:将es配置文件elasticsearch.yml的path.data:配置项改为原来data目录的绝对路径即可。注意path.data:前后都有空格,否则启动报错。...

#elasticsearch#大数据#big data
到底了