logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

hadoop官网最新稳定版安装包下载(高效,无毒,简便)

Hadoop是大数据的核心武器,下面来介绍在Windows环境下Hadoop的安装和配置1.下载Hadoophttp://www.apache.org/dyn/closer.cgi/hadoop/common2.解压hadoop-2.7.3.tar.gz 点右键“解压到hadoop-2.7.3”文件夹路径 xxx/xxxx/hadoop-2.7.3复制hadoop-2.7...

#hadoop
如何搭建企业大数据分析平台

讨论一:先来谈谈企业搭建大数据分析平台的背景。1、搭建大数据平台离不开BI。在大数据之前,BI就已经存在很久了,简单把大数据等同于BI,明显是不恰当的。但两者又是紧密关联的,相辅相成的。BI是达成业务管理的应用工具,没有BI,大数据就没有了价值转化的工具,就无法把数据的价值呈现给用户,也就无法有效地支撑企业经营管理决策;大数据则是基础,没有大数据,BI就失去了存在...

一文对比storm与spark(特性与应用场景)

背景随着实时数据的增加,对实时数据流的需求也在增长。更不用说,流技术正在引领大数据世界。使用更新的实时流媒体平台,用户选择一个平台变得很复杂。Apache Storm和Spark是该列表中最流行的两种实时技术。让我们根据它们的功能比较Apache Storm和Spark,并帮助用户做出选择。本文的目的是Apache Storm Vs与Apache Spark无关,不是要对两者进行判断,而是要研究两

#分布式#大数据#storm +1
OPC技术

概述:OPC(OLE for Process Control)技术是指为了给工业控制系统应用程序之间的通信建立一个接口标准,在工业控制设备与控制软件之间建立统一的数据存取规范。它给工业控制领域提供了一种标准数据访问机制,将硬件与应用软件有效地分离开来,是一套与厂商无关的软件数据交换标准接口和规程,主要解决过程控制系统与其数据源的数据交换问题,可以在各个应用之间提供透明的数据访问。作用:OPC...

基于大数据的工程行业的企业级数据中心建设实例

摘要目前工程企业所使用数据中心,多采用传统技术建设,普遍存存在着建设成本高、扩展性不强、计算处理及分析挖掘能力有限的缺点。为了满足基于大数据的数据存储、处理、分析及应用需求,结合并行计算、大规模数据分析挖掘、线性扩展、全类数据支持等技术的企业级数据中心能够有效的实现全业务、全层级、全类型数据资源的集中整合和分析。目前,大部分工程行业企业所构建的数据中心积累了大量的结构化数据、非结构化数据...

解决linux下syslog文件过大

方案一:su (进入root权限)echo " " > /var/log/kern.logecho " " > /var/log/syslog方案二:#写个自动覆盖文件内容的脚本,每三分钟覆盖一次*/3 * * * * echo " " > /var/log/kern.log*/3 * * * *

python+flume+kafka+SparkStreaming+HBase实现日志采集实时数据分析功能

功能介绍(python模拟产生日志,flume采集日志文件更新【一分钟一更新】,作为kafka的生产者连接存入topic,idea编写kafka消费者消费数据,消费的同时存储至hbase)步骤1.编写python日志产生程序generatorLog.py2.定时调用py执行日志产生定时运行程序crontab -e*/1 * * * */home/hadoop/project/s...

Java通过sessionid获取session

1,首先生成session,并获取其id。2,将sessionid与session通过键值对的形式进行存储(静态全局变量)。3,需要使用的时候将session进行取出代码:HttpSession session = request.getSession();//获取sessionidString sessionId = session.getId();sHa...

CentOS7安装cmake详细完整流程

1.查看Linux位数:#getconf LONG_BIT 2.获cmake源码包,这里我先新建一个文件夹来存放cmake# mkdir app# cd /app# wget https://cmake.org/files/v3.3/cmake-3.3.2.tar.gz 3.解压...

#centos
    共 20 条
  • 1
  • 2
  • 请选择