python基础 - 位置参数、默认参数、可变参数、关键字参数大家好，我是W在看源码的时候经常看到各式各样的参数，有的参数有默认值，有的参数没有默认值，有的参数连参数的名都没有，只能看到*args和**kwargs。这些东西到底有什么区别，怎么使用呢？接下来我们学习的顺序是位置参数、默认参数、可变参数、关键字参数。位置参数位置参数顾名思义就是与位置有关的参数，在调用函数的时候需要根据传入参...

逻辑回归(LogisticRegression)算法及简单案例大家好，我是W逻辑回归虽然名字有回归，但是实际上是分类模型，常用于二分类。**回归的意思是：在二维空间中找到一条最佳拟合直线去拟合数据点；在多维空间中找到最佳拟合超平面去拟合数据点，这个寻找拟合的过程就叫做回归。**这篇文章的顺序是：介绍相关概念、逻辑回归原理、案例 - 简单数据集的逻辑回归分类。介绍相关概念二值型输出分类函数在我们通过

线性回归算法的原理和代码实现大家好，我是W这次讲线性回归，之前有说逻辑回归（Logistic Regression），虽然逻辑回归负责分类，可是在数据到达二值函数之前的逻辑都是线性回归的逻辑，所以这两个回归是十分相似的。这篇文章的顺序是：1、线性回归算法原理 2、最小二乘法和算法评估标准 3、案例1-简单数据集标准线性回归 4、案例2-简单数据集局部加权线性回归 5、案例3-鲍鱼年龄预测。1、线性

【翻译】StreamDM：基于Spark Streaming的高级数据挖掘 StreamDM: Advanced Data Mining in Spark Streaming摘要 Abstract​由于不断产生的大量数据，实时分析变得越来越重要。根据我们在华为诺亚方舟实验室的经验，我们在这里展示并演示了StreamDM，这是一个新的开源数据挖掘和机器学习库，设计在SparkStreaming之上，

【翻译】Big Data Analysis: Apache Storm Perspective 大数据分析：Apache Storm视角摘要 Abstract技术的繁荣导致了新概念和新挑战的出现。大数据是当今人们谈论的术语之一。在商业竞争中，大数据正成为竞争优势的同义词。尽管大数据带来了巨大的好处，但也伴随着一些严峻的挑战，当涉及到大数据分析时，它需要一些严肃的思考。在业界最受信任的实时处理和容错

【翻译】ASML Automatic Streaming Machine Learning摘要 Abstract​除了大数据系统的规模问题，新数据产生和移动的高速度也带来了新的挑战。为了提取有用的见解，构建能够高效处理高速数据的系统变得至关重要，如果处理大数据而无法从中获得价值则并没有什么意义。​与典型的离线/批处理机器学习场景相反，在流的设置中，数据无法预先访问，我们需要在流数据到达时即刻学习并

伪分布式Hadoop下Java API 调用以及一些问题的解决方案大家好，我是村口靠捡牛粪过日子的可怜虫最近比较忙都没时间写博客了，想想也没什么分享，就给大家分享一些我的报告。这次分享的是Hadoop的Java API调用。一、实验目的（1） 理解HDFS在Hadoop体系结构中的角色（2） 熟练使用HDFS操作常用的shell命令（3） 熟悉HDFS操作常用的Java API二、实验环境类型名称

RDD到底是什么？RDD的API大家好，我是W今天给大家带来一篇关于Spark和RDD的博客，由于我也是初学者，所以没法带来那么深刻的东西，但是我希望用我的感性认知带给大家一点灵感，毕竟刚开始学习Spark的时候我对RDD概念、Spark流程是有很多困惑的，我觉得大家也可能存在这种问题。OK，接下来我将从以下几个角度来讲RDD和Spark：1、 Spark简介、对比hadoop、生态，2、 RDD