logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

MRv1的新旧API分别与MRv2的API兼容性分析

浅析MRv1与MRv2的API兼容性1. 基本概念MRv1是Hadoop 1.X中的MapReduce实现,它由编程模型(新旧编程接口)、运行时环境(由JobTracker和TaskTracker组成)和数据处理引擎(MapTask和ReduceTask)三部分组成。该框架在扩展性、容错性(JobTracker单点)和多框架(仅支持MapReduce一种计算模型)等支持方面支持不足。关于M

数据仓库、OLAP和 数据挖掘、统计分析的关系和区别分析 .

数据仓库、OLAP和 数据挖掘、统计分析的关系和区别分析一、什么是数据挖掘  数据挖掘(Data Mining),又称为数据库中的知识发现(Knowledge Discovery in Database, KDD),就是从大量数据中获取有效的、新颖的、潜在有用的、最终可理解的模式的非平凡过程,简单的说,数据挖掘就是从大量数据中提取或“挖掘”知识。  二、数据挖掘相关的10个问题  

#数据仓库#数据挖掘
业界常见的数据挖掘软件介绍

业界常见的数据挖掘软件介绍一、主要介绍12种1.传统的数据挖掘套件(Classic suites):SAS Enterprise Miner 5.3SPSS Clementine 122.开源数据挖掘软件(Open Source):Weka 3.4.13RapidMiner 4.2KNIME 1.3.5 3.自动化数据挖掘软件(Self-Acting):KX

#数据挖掘
Java内存机制

Java内存机制    在java程序开发中,有时候会遇到“内存溢出”的问题,很是头疼,通过实际对程序的监控和网上相关博客的学习,了程序运行时对内存的使用机制现。将将下述文字记述在此,作为应用以后参考。    Java程序运行在JVM(JavaVirtual Machine,Java虚拟机)上,可以把JVM理解成Java程序和操作系统之间的桥梁,JVM实现了Java的平台无关性,由此可见J

Java程序利用main函数中args参数实现参数的传递

Java程序利用main函数中args参数实现参数的传递1.运行Java程序的同时,可以通过输入参数给main函数中的接收参数数组args[],供程序内部使用!即当你在Java命令行后面带上参数,Java虚拟机就直接把它们存放到了main方法中的参数String数组里了。2..args是Java命令行参数,因为参数可以为多个,所以要用数组来存我们在DOS中执行Java程序的时候使用“jav

linux系统中drrwx-xr-x 用法详解

drrwx-xr-x  用法详解drwxr-xr-x  用法详解:第一位表示文件类型。d是目录文件,l是链接文件,-是普通文件,p是管道第2-4位表示这个文件的属主拥有的权限,r是读,w是写,x是执行。第5-7位表示和这个文件属主所在同一个组的用户所具有的权限。第8-10位表示其他用户所具有的权限。图示说明:例如:drrwx-xr-x   user1  grou

Hadoop系统完全分布式集群搭建方法

Hadoop系统分布式集群搭建方法 1. linux操作系统安装在每个节点上安装Linux操作系统(Centos6.3),安装时为各机器分别命名为 Master,slave1、slave2…。令主机名为Master的作为主节点,主机名为slave1、slave2…作为从节点。如果是在已经安装好系统的集群中配置hadoop环境,且各机器的主机名命名无规律,这时最好按照下述方法修改主机

#集群
linux中统计字节数、字数、行数命令wc用法详解

linux中统计字节数、字数、行数命令wc用法详解linux中的wc命令主要功能是统计指定文件中的字节数、字数、行数,并将统计结果显示输出。语法:wc [选项]文件名…说明:该命令统计给定文件中的字节数、字数、行数。如果没有给出文件名,则从标准输入读取。wc同时也给出所有指定文件的总统计数。字是由空格字符区分开的最大字符串。该命令各选项含义如下:c统计字节数。l统计

#linux
Linux Centos下软件的安装与卸载方法

linux下软件的安装与卸载 第一章   linux下安装软件,如何知道软件安装位置注:一般的软件的默认安装目录在/usr/local或者/opt里,可以到那里去找找.指令名称:whereis功能介绍:在特定目录中查找符合条件的文件。这些文件的烈性应属于原始代码,二进制文件,或是帮助文件。语法格式:whereis [-bfmsu][-B ...][-M ...][-S .

JavaWeb开发中Ajax技术、json与java实现List、Map数据直接传递的研究

ajax和json跟java实现List、Map直接传递                              在JavaWeb开发中基于jquery框架来使用ajax技术与后台进行数据交互示例        由于项目需要通过ajax得到后台的List对象里面的值,由于没有接触过json所以前期我只能先传字符串再在js里截取子串实现。闲暇时间摸索了一下关于json接受List对象的

    共 17 条
  • 1
  • 2
  • 请选择