logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

搞懂spark-submit参数及应用程序提交(详细)

介绍当前支持三种集群管理器:Spark独立集群管理器,一种简单的Spark集群管理器,很容易建立集群,基于Spark自己的Master-Worker集群Apache Mesos,一种能够运行Haoop MapReduce和服务应用的集群管理器Hadoop YARN,Spark可以和Hadoop集成,利用Yarn进行资源调度如果在集群中仅有Spark程序,那么可以使用Spark独立的集群管理器。如果

#spark
python绘制雷达图(详细)

雷达图介绍雷达图是以从同一点开始的轴上表示的三个或更多个定量变量的二维图表的形式显示多变量数据的图形方法。轴的相对位置和角度通常是无信息的。 雷达图也称为网络图,蜘蛛图,星图,蜘蛛网图,不规则多边形,极坐标图或Kiviat图。它相当于平行坐标图,轴径向排列。【搜狗百科】雷达图通常用于综合分析多个指标,具有完整,清晰和直观的优点。下面用实现用python制作雷达图的方法和过程:雷达图制作定义标准化函

#python#matplotlib
机器学习中什么算法最好?了解“没有免费的午餐”定理

这里天在公众号看了几篇深度学习的文章,发现有些人对深度学习仍然迷之自信,让我想起了网上看过的一个网友分享的自己的经历(此处应有哭笑不得的表情):作为从业人员,我兴奋于目前已有的多种深度学习框架,如深度神经网络、卷积神经网络、深度置信网络以及递归神经网络等。也很高兴深度学习目前取得的一些巨大成功,并且在计算机视觉、语音识别、自然语言处理、音频识别及生物信息学等领域的落地和应用也都获取了极好的效果。但

机器学习复盘(2):机器学习主要应用场景及典型案例

人工智能(AI)和机器学习(ML)正在成为主流,有越来越多的企业正在利用这种模仿人类思维的技术来吸引客户并加强业务运营。而这种趋势只会越来越受欢迎。什么时候需要机器学习机器学习的出现主要是为了解决一些超出人类能力的任务。有些任务人工计算或者直接编码较为复杂。面对庞大且复杂的数据集的分析,比如天文数据,气象预报,基因组数据分析,网络搜索引擎和电子商务等。特别是互联网时代,随着数据的爆炸式在增长,隐含

#机器学习#自然语言处理#人工智能
linux创建虚拟环境(python虚拟环境)

解决问题1:为便于对包进行管理,多个python项目需要使用独立的python环境,这样便于进行包的管理,利用Anaconda来创建一个干净的python虚拟环境解决问题2:在提交代码到yarn模式的时候,会出现诸如类似如下报错。ImportError: No module named numpy第一步:安装Anaconda。系统中首先需要安装的有anaconda,然后才可以使用conda命令,此

#linux#python#conda
if __name__ == ‘__main__‘的详细讲解

在 Python 代码中,我们经常会看到if __name__ == '__main__':本文详细总结一下用法。先给出结论,对该语句用法简单的解释就是: 如果if __name__ == '__main__' 所在模块是被直接运行的,则该语句下代码块被运行,如果所在模块是被导入到其他的python脚本中运行的,则该语句下代码块不被运行。下边具体的讲解。首先我们得先明白一个概念:程序入口。程序入口

#python
python绘制雷达图(详细)

雷达图介绍雷达图是以从同一点开始的轴上表示的三个或更多个定量变量的二维图表的形式显示多变量数据的图形方法。轴的相对位置和角度通常是无信息的。 雷达图也称为网络图,蜘蛛图,星图,蜘蛛网图,不规则多边形,极坐标图或Kiviat图。它相当于平行坐标图,轴径向排列。【搜狗百科】雷达图通常用于综合分析多个指标,具有完整,清晰和直观的优点。下面用实现用python制作雷达图的方法和过程:雷达图制作定义标准化函

#python
暂无文章信息