logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

CentOS 7下Cloudera Manager及CDH 5.14.0安装过程详解

大家都知道,Apache Hadoop的配置很繁琐,而且很零散,为此Cloudera公司提供了Clouder Manager工具,而且还封装了Apache Hadoop,flume,spark,hive,hbase等大数据产品形成自己特色的CDH产品,再使用CM进行安装,很大程度上方便了集群的搭建,并提供了集群的监控功能。转载:点击打开链接一、环境:1.三台VMware虚拟机(一个做为主节点,两个

未授权导致jenkins启动异常处理示例

1、Jenkins启动,但未建立监听端口和未查到对应服务进程2、经排查发现日志文件清空后,未宿主文件权限授予给jenkins账号,导致读写访问异常。3、最终发现/var/log/jenkins创建的日志文件没有授权给jenkins用户。chown -R jenkins:jenkins /var/log/jenkins4、再使用service jenkins start,启动后如下:[root@or

基于CDH版本5.13.3验证Spark Streaming

实现背景由于部门及已上项目使用的是CDH版本大数据平台,为了更好改善在线生产系统日志实时抓取分析。需要加装Kafka作为采集数据源,使用SparkStreaming处理数据。安装环境硬件规划CPU物理内存磁盘存储节点1核X2颗 Intel Core Processor 2295MH...

到底了