logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

fabric在make docker时遇到的问题

在进行make docker时,最后出现如下错误:Building dockerized gotoolsmake[1]: Entering directory '/opt/gopath/src/github.com/hyperledger/fabric'Building github.com/maxbrunsfeld/counterfeiter -> counterfeiterp..

#fabric
spark启动pyspark shell时报错socket.error: [Errno 99] Cannot assign requested address

这是个socket请求错误,意思是说不能为其分配请求的地址。 分析原因:socket发起connect请求的时候会随机分配一个端口给你。这个分配的端口是有范围的,记录在:/proc/sys/net/ipv4/ip_local_port_range可以看到我的端口范围是32768到60999。当你用多个进程发起过多的请求的时候,端口用完了就会报这个错误。解决办法:要解...

hadoop2.7.5+zookeeper3.4.8 HA高可用集群搭建

环境介绍系统:CentOS-7-x86_64-DVD-1611.iso 最小化安装hadoop版本:2.7.5zookeeper版本:3.4.8集群介绍两台namenode三台datanode主机名ip地址安装的软件jps进程master192.168.89.128Jdk/hadoop/zookeeperNa...

#hadoop#zookeeper
hadoop处理excel数据

 博文连接:https://blog.csdn.net/py_123456/article/details/79888341

#hadoop
hadoop集群基础上安装ZooKeeper和HBase

之前的文章已经介绍了如何搭建hadoop集群,以及在hadoop集群之上搭建spark集群。可以点击如下链接查看:一、centos7+hadoop2.8.0+VMware搭建完全分布式集群二、hadoop完全分布式基础上搭建spark集群本篇文章记录的是在上述hadoop集群上安装HBase和ZooKeeper的过程,以备后续参考!软件版本和系统环境①HBase,1.2.5,下...

#hadoop#zookeeper#hbase
hadoop2.8的namenode节点用jps发现没有jobtracker 和tasktracker

原因是hadoop2.0以后的版本采用的是YARN作为资源管理器,包含了1.x版本的jobtracker和tasktracker功能。2.0之后的版本,安装成功后namenode节点用jps只会显示以下几个进程:转载:http://www.aboutyun.com/thread-7678-1-1.html问题导读:1、什么是yarn?2、Yarn 和MapReduce相比,它有什么特殊作用 ?背景

hadoop完全分布式基础上搭建spark集群

此部分内容是建立在前面的hadoop集群搭建基础之上的,具体参考:centos7+hadoop2.8.0+VMware搭建完全分布式集群,但是要注意的是因为后面重新搭建了一次hadoop,用的jdk版本改成了jdk1.8.0_171,所以在安装时要注意统一! 步骤 一、在master上安装Spark依赖的Scala并配置环境变量二、在master上下载和解压缩Spark并配置相...

数据挖掘入门算法ID3

开始学习数据挖掘算法!ID3算法以信息熵和信息增益作为衡量标准的一种决策树分类算法。属于有监督算法。在ID3算法中,选择信息增益最大的属性作为当前的分类标识(类标)对数据集进行分类,进而能够得到深度尽可能浅的决策树。相关理论基础信息量衡量信息多少的物理量,一个事件发生的概率越大,其包含的信息量就越少。信息熵参考https://blog.csdn.net/ustcyy91/article/detai

spring boot扫描不到dao层对象

今天发现一个问题,就是在dao层用@Repository注解的话,spring boot是扫描不到的,会报错,需要改成用@Mapper注解。import org.apache.ibatis.annotations.Mapper;import org.springframework.stereotype.Repository;import java.util.List;//@Repository@M

#mybatis#spring#spring boot
centos7+hadoop2.8.0+VMware搭建完全分布式集群

相关软件:①CentOS-7-x86_64-DVD-1611.iso②hadoop-2.8.0.tar.gz③jdk-8u161-linux-x64.tar.gz④VMware版本10.0.4 build-2249910 第一步:安装虚拟机假设已安装好VMware(如果未安装,点这里)。接下来在VMware中安装centos系统,基本按照默认选项进行安装,只需要修改一下...

    共 22 条
  • 1
  • 2
  • 3
  • 请选择