logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

如何安装Hadoop:Hadoop本地安装指南

在大数据技术的学习当中,关于Hadoop系统的学习无疑是非常重要的一部分,而学习Hadoop的第一步,通常需要从HDFS开始学起,要进行HDFS的操作实践,首先就需要安装好Hadoop。下面我们就来为大家分享一下如何安装Hadoop。Hadoop目前主要有三种安装模式,包括本地模式、伪分布式模式、全分布式模式,三种模式的安装有难易差别,操作使用上也有不同的限制。本地模式是最简单的一种,只需要一台虚

文章图片
#大数据#hadoop#分布式
Hadoop和Kafka啥关系?Hadoop Kafka简介

众所周知,Hadoop生态系统发展至今,已经汇集了超过二十个组件,这些组件各自致力于解决大数据处理当中所遇到的问题,同时基于Hadoop集群,也能实现很好的协作运行,共同来完成大数据处理各个环节的任务。其中涉及Kafka组件,有同学在问Hadoop和Kafka啥关系,下面我们就来解答一下。首先,我们必须要了解一个事实,Hadoop和Kafka同属于Apache软件基金会,都是Apache旗下的开源

#分布式#kafka#大数据
大数据开发:Docker底层原理入

一.什么是dockerDocker 是一个开源的应用容器引擎,基于 Go 语言 并遵从Apache2.0协议开源。Docker 可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中,然后发布到任何流行的 Linux 机器上。二、docker能解决什么问题1.高效有序利用资源机器资源有限;单台机器得部署多个应用;应用之间互相隔离;应用之间不能发生资源抢占,每个应用只能使用事先注册申请的资

#docker#linux#java +2
Hadoop和Kafka啥关系?Hadoop Kafka简介

众所周知,Hadoop生态系统发展至今,已经汇集了超过二十个组件,这些组件各自致力于解决大数据处理当中所遇到的问题,同时基于Hadoop集群,也能实现很好的协作运行,共同来完成大数据处理各个环节的任务。其中涉及Kafka组件,有同学在问Hadoop和Kafka啥关系,下面我们就来解答一下。首先,我们必须要了解一个事实,Hadoop和Kafka同属于Apache软件基金会,都是Apache旗下的开源

#分布式#kafka#大数据
大数据还是人工智能?哪个发展更好

大数据和人工智能,都是当下的技术热点,受到的关注都不少,并且这两个技术领域,本身也存在很强的关联性,因此很多人也会把这两者拿来做对比,从技术难度到未来前景,大家都非常关注。大数据还是人工智能?哪个未来发展更好?今天我们来具体聊一聊。对于大数据和人工智能这两个技术领域,首先都很新,这是事实,同时发展势头也很好,前景可期,但是对专业技术的要求,也都不低。在学大数据还是人工智能这个问题上,建议一定要考虑

#大数据#人工智能#java
大数据开发:四种消息队列对比

对于消息队列组件,在大数据技术生态当中,是有着多种解决方案的,在实际的开发任务当中,往往需要根据具体的需求,去规划解决方案。今天的大数据开发学习分享,我们主要来讲讲常用的四种消息队列的对比。1、ActiveMQActiveMQ是由Apache出品,ActiveMQ是一个完全支持JMS1.1和J2EE1.4规范的JMS Provider实现。它非常快速,支持多种语言的客户端和协议,而且可以非常容易的

文章图片
#大数据#kafka
Hadoop数据库:基于Hadoop的数据库Hbase介绍

在大数据领域,Hadoop技术框架的重要性是已经得到大家认可的,而基于Hadoop框架系统之下的各个组件,也不断在更新完善。关于Hadoop数据库的问题,也是很多同学学习当中的难点,今天我们就主要来聊聊Hadoop框架下的数据库,也就是Hbase的相关内容。Hbase,其实就是Hadoop DataBase,作为Hadoop的数据库,因为Hadoop的分布式框架,所以也被称为是分布式数据库,数据的

#数据库#分布式#hadoop +2
大数据开发之Hadoop系统运维

在大数据处理的流程环节当中,运维是重要的一环,而从事运维工作的工程师们,也需要专业的技能支撑。不同于传统的运维,大数据运维,因为涉及到云计算、虚拟化等技术,所以工作任务也更加复杂。今天的大数据开发学习分享,我们来讲解Hadoop系统运维。大数据时代的运维,涉及到大数据集群,比如说Hadoop,针对大规模的分布式集群,需要完成更复杂的运维工作。通常来说,Hadoop大数据系统运维,需要掌握至少三个方

文章图片
#大数据#运维#分布式 +1
到底了