logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

hadoop远程客户端安装配置

hadoop远程客户端安装配置客户端系统:ubuntu12.04客户端用户名:mjiang服务器用户名:hadoop下载hadoop安装包,保证和服务器版本一致(或直接copy服务器的hadoop安装包) 到 http://mirror.bjtu.edu.cn/apache/hadoop/common/ 下载tar.gz安装包,解压。tar zxvf h

linux 字符串转换成数组

linux中数组用小括号定义,所以转换的时候只需要吧变量放在小括号中即可1. 直接创建数组[root@hadoop ~]# names=(wei hong rao)[root@hadoop ~]# echo ${#names[@]}32.通过命令结果获取数组[root@hadoop ~]# names=($(echo 'wei hong rao') )[root@h

ubuntu 下安装xmind

1.到xmind官方网站上下载deb包 xmind-linux-3.4.1.201401221918_amd64.deb2. sudo dpkg --ignore-depends=sun-java5-jre,sun-java6-jre,openjdk-6-jre -i xmind-linux-3.4.1.201401221918_amd64.deb 这一步确保已经安装了java ,我由于安

oracle 创建临时表的几种方法

会话临时表 和事物临时:     Create Global Temporary Table Table_Name      (Col1 Type1,Col2 Type2...) On Commit Preserve Rows ;            Create Global Temporary Table Table_Name      (Col1 Type1,Col2

hadoop报 No route to host

这是由于我在工作环境中频繁使用VPN 然而在hosts 文件中固化了ip ,导致在本机的ip更改了之后没有更新hosts 里面的IP 导致了没有办法识别虚拟机中的namenode,将hosts的IP更新,此问题化解

主机不联网时和vitrualbox虚拟机通信

主机:ubuntu虚拟:virualbox(4台ceontos虚拟机)原来所有的虚拟及全部之配置一个网卡选择桥接的方式,但是虚拟机中的网卡有时候无法启动,索性在增加一块网卡,重启虚拟机后,多出一个网卡eth1(原来的是eth0),启动eth1成功,但是为了设置静态IP,到/etc/sysconifg/network-scripts中新建ifcfg-eth1,内容如下:DEVIC

python main 函数

模拟一个类似java的main函数:1. 可以看出如果单独执行时先进入main[root@hadoop Desktop]# cat hongrao.py#! /usr/bin/python# this is test main function by hongraodef hongrao():    name="weihongrao"    prin

MR python joiner

继承http://blog.csdn.net/weihongrao/article/details/16826763 把上次得出的数据在和group维度表进行关联得到group名称mapper:joinm#!/usr/bin/pythonimport sysclass mapper:    def map(self):        for line in

到底了