logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

MapReduce1-2:MapReduce任务的优化

MapReduce任务的优化相信每个程序员在编程时都会问自己两个问题“我如何完成这个任务”,以及“怎么能让程序运行得更快”。同样,MapReduce计算模型的多次优化也是为了更好地解答这两个问题。MapReduce计算模型的优化涉及了方方面面的内容,但是主要集中在两个方面:一是计算性能方面的优化;二是I/O操作方面的优化。这其中,又包含六个方面的内容。1. 任务调度

什么是数据挖掘

由于数据科学刚刚兴起,数据科学家作为一种新生职业被提出,数据研究高级科学家Rachel Schutt将其定义为”计算机科学家、软件工程师和统计学家的混合体“。数据挖掘作为一个学术领域,横跨多个学科,涵盖了统计学、数学、机器学习和数据库等,此外还包括各类专业方向比如从油田电力、海洋生物、历史文本、电子通讯、法律税务等的各个专业领域。注意每一分类都需要相当的行业经验。而要明白某一事物的本质,就

Hive出现异常 FAILED: Error In Metadata: 的解决办法

在公司的虚拟机上运行hive计算,因为要计算的数据量较大,频繁,导致了服务器负载过高,mysql也出现无法连接的问题,最后虚拟机出现The remote system refused the connection.重启虚拟机后,进入hive。hive> show tables;出现了下面的问题:FAILED: Error in metadata: java.lang.Run

浅谈对云计算的认识

前言云计算,为我们新手、菜鸟带来了机会------年轻就是最大的资本啊。也正因为如此,我们更应该努力,没有理由放弃努力。(当然,如果你有一天娶了个白富美或者高富帅,亦或是买彩票中了百万大奖,那就另当别论了)。云计算简介云计算是一个大范围的概念,目前大家比较认同的说法是云计算包括IaaS、PaaS、SaaS三层含义:IaaS是把IT基础设施

virtualbox虚拟机设置静态IP的桥接模式配置

virtualbox虚拟机设置静态IP的桥接模式配置-本博客主要是解决宿主机和虚拟机之间相互能ping通,并且浏览器输入ip地址可以打开,但是输入域名就无法显示的问题- 首先查看宿主机的IP情况,cmd命令行输入ipconfig /all,尤其是IPv4地址和DNS服务器-然后按照上面得到的信息依次输入即可,网关也要参考宿主机的网关,之前有博客上面说是宿主机的IP,这个是错误的

#桥接模式
到底了