logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

MapReduce的通俗理解与入门

看这篇文章请出去跑两圈,然后泡一壶茶,边喝茶,边看,看完你就对hadoop 与MapReduce的整体有所了解了。【前言】Hadoop是一个实现了Google云计算系统的开源系统,包括并行计算模型Map/Reduce、分布式文件系统HDFS,以及分布式数据库Hbase,同时Hadoop的相关项目也很丰富,包括ZooKeeper,Pig,Chukwa,Hive,Hbase,Mahout,flume等

#mapreduce
Eclipse中的maven项目打成jar包

实际生产中,我们经常要将maven项目打包成jar,然后直接放入hadoop集群环境中运行。之前对于maven项目的使用走了很多弯路,调试了好久,终于调试通过了。以下将为大家分享一下经验。本文讲解的是打成jar包,不是war包。首先在pom.xml中添加如下代码(添加插件,使得dependencies与项目源码打成一个jar):<build><plugin

Eclipse中 XXX cannot be resolved to a type的解决方案

在eclipse的使用过程中,经常会遇到XXX cannot be resolved to a type的问题,其字面意义是无法识别的类型,也就是说你的代码中有可能存在以下几种情况:(1)未导入的包;(2)写错的Class Name;(3)未创建却被使用的变量。因为现在的开源化开发环境,很多情况都是使用maven集成开发,或者jar包的导入方面存在缺少对应和jar包和jar包版本冲突等问题,故容易

MapReduce的通俗理解与入门

看这篇文章请出去跑两圈,然后泡一壶茶,边喝茶,边看,看完你就对hadoop 与MapReduce的整体有所了解了。【前言】Hadoop是一个实现了Google云计算系统的开源系统,包括并行计算模型Map/Reduce、分布式文件系统HDFS,以及分布式数据库Hbase,同时Hadoop的相关项目也很丰富,包括ZooKeeper,Pig,Chukwa,Hive,Hbase,Mahout,flume等

#mapreduce
到底了