logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

hadoop在ubuntu下的安装配

前面均在windows下进行,但是在安装hadoop过程中出了一些问题,先暂时切换到linux下,回头再补充windows下的安装。不过通过对比确实发现,在linux下的安装配置确实比较简单。一.安装ubuntu  我是下载的ubuntu12.04,在64位的虚拟机上使用virtualbox安装的,没错,是在虚拟机上在安装虚拟机,然后安装ubuntu具体安装过程就不描述了,不过安装过程

巧用MapReduce+HDFS,海量数据去重的五大策略

MapReduceHDFSHadoop存储HbaseDedoop云计算摘要:随着收集到数据体积的激增,去重无疑成为众多大数据玩家面对的问题之一。重复数据删除在减少存储、降低网络带宽方面有着显著的优势,并对扩展性有所帮助。在存储架构中,删除重复数据的常用方法包括哈希、二进制比较和增量差分;而本文专注的是使用MapReduce和HDFS对数据进行去重。随着存储数据信息量的飞速增长,越来越多

OceanBase分布式系统负载均衡案例分享

淘宝:OceanBase分布式系统负载均衡案例分享摘要:Heroku的问题让我们意识到,在负载均衡测试时发现问题并妥善解决的成功经验有没有?于是,挖掘出“淘宝在双十一压测OB时发现存在严重的随机访问导致负载不均问题,并通过加权算法妥善解决”的成功案例,也就是本文。编者按:在CSDN云计算频道日前所做的文章《响应高达6秒 用户揭露Heroku私自修改路由造成高

名词解释——分布式计算、并行计算及集群、网格、云计算的区别

并行计算:并行计算是相对于串行计算来说的。可分为时间上的并行和空间上的并行。 时间上的并行就是指流水线技术,而空间上的并行则是指用多个处理器并发的执行计算。例如基于CUDA编程。并行计算的目的就是提供单处理器无法提供的性能(处理器能力或存储器),使用多处理器求解单个问题。总结:并行的主体 -- 处理器;进程/线程级并行。分布式计算:分布式计算研究如何把一个需要非常巨大的计算能力才能解决

Linux下的搜狗拼音输入法-fcitx sougopinyin

下载地址http://pan.baidu.com/share/link?shareid ... 4194345185http://www.163disk.com/filekey/tb43ca0b86http://vdisk.weibo.com/s/vP89E[/code]ubuntu12.04的fcitx版本不支持,不满足依赖,需要更新fcitx添加fcitx源

红黑树(red-black tree)算法,附AVL树的比较

导读:  linux内核中的用户态地址空间管理使用了红黑树(red-black tree)这种数据结构,我想一定有许多人在这种数据结构上感到困惑,我也曾经为此查阅了许多资料以便了解红黑树的原理。最近我在一个外国网站上看到一篇讲解红黑树的文章,觉得相当不错,不敢独享,于是翻译成中文供所有内核版的弟兄们参考。由于本人水平有限,难免有出错之处,欢迎大家指正。  原文网址:http://sa

linux下编程实现将域名地址转换为IP地址

struct hostent结构体这个数据结构是这样的: struct    hostent {    const char    *h_name;    // official name of host    char    **h_aliases;    // alias list    short    h_addrtype;    // host address t

Ubuntu下定制vim/gvim及使用技巧

[前言] vim是linux下的编辑器之神,是玩linux的必备工具,同样emacs是神的编辑器,两个编辑器是各有千秋,看个人的喜好,青菜萝卜各有所爱。我是比较喜欢vim,用vim编写bash,perl,python脚本,以及修改配置文件等等,本文就主要介绍在Ubuntu下gvim环境的搭建,希望对大家有所帮助目录:一. Ubuntu安装gvim方法二.安装gvim常用插件

linux上的apache2服务器开启激活和配置端口方法

绑定地址与端口启动apache2调用命令apache2ctl来启动,而非apache2。它可以简单地用start、stop、restart等参数,也可以使用和apahce2一样的参数。在/etc/init.d/apache2所以只用调用:安装apache2服务器:sudoapt-get install apache2开启服务器:sudo /etc/init.d/ap

Linux命令——chmod(修改读写执行等权限)

Linux命令——chmod命令描述  变更文件或目录的权限。在UNIX系统家族里,文件或目录权限的控制分别以读取,写入,执行3种一般权限来区分,另有3种特殊权限可供运用,再搭配拥有者与所属群组管理权限范围。您可以使用chmod指令去变更文件与目录的权限,设置方式采用文字或数字代号皆可。符号连接的权限无法变更,如果您对符号连接修改权限,其改变会作用在被连接的原始文件。权限范围的表示法如下:

    共 14 条
  • 1
  • 2
  • 请选择