logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

大数据集群问题总结

1.集群子节点dataanode起不起来2.在安装CDH的时候监控不到节点a.首先看在各个agent节点中在cm-5.14.4/etc/cloudera-scm-agent/路径下的config.ini中的server_host=主节点,配置没3.如果安装CDH失败a.先停止所有的agent和server服务cloudera-scm-agent stop ;cloudera-scm-server

#cloudera#hadoop#kafka +1
大数据集群各种压测

本次主要是对新集群的性能测试,测试环境:系统环境台数CPU内存硬盘Centos7.3CDH6.0.13台3264G16THadoop自带的测试工具:Hadoop基准测试首先,对服务器做一下测试,主要是磁盘I/O和网络I/O。磁盘I/O读测试hdparm 用于查看硬盘的相关信息或对硬盘进行测速、优化、修改硬盘相关参数设定。这里只用作磁盘读测试。yum install hdparmhdparm -t

#hadoop
到底了