logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

在windows中安装Hadoop

第一步:安装cygwin,运行在window上的Unix模拟软件    在https://cygwin.com/install.html下载cygwin软件。      Net Catagory:openssl, openssh      Base Category:sed      Devel Category:subversion     安装完成:

#hdfs#hadoop
开发一款开源爬虫框架系列(六):爬虫分布式化RPC

    最近终于有部分时间继续开发爬虫,主要的任务是客户端和服务器端分离,这就涉及到远程调用的问题,所以研究了RPC,主要对象是Hessian、JMI、Dubbo、Thrift。进而想用几篇博文分享一下几种远程调用协议的一些东西,以后再接着聊爬虫。有兴趣可以访问我的爬虫项目:https://gitee.com/coliza/MongooCrawler    ...

#爬虫#分布式
到底了