logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

pyspark 实践汇总5

1. 时间戳转string型日期data1 = data.withColumn("newdate",from_unixtime(data["date"],format='yyyyMMdd'))这里通过from_unixtime将时间戳转到年月日格式的string2. 将string日期转成时间戳data1 = data.withColumn("ne

pyspark实践汇总4

1. 对数据框中的时间戳转换为字符串型的时间data1 = data.withColumn("newdate",from_unixtime(data['stamptime'],format='yyyyMMdd'))2. 对数据框中的多列进行分组data1 = data.groupBy(["column1","column2","

pyspark 实践汇总3

#本地字符串时间转时间戳fullend = "20170120"trackdate = int(time.mktime(time.strptime(fullend,'%Y%m%d')))#spark字符串时间转时间戳test1 = test.withColumn('unixtime',unix_timestamp('time','yyyy/MM/dd'))#多个字段/属性同时o

python语言 pyspark中dataframe修改列名

这里给出在spark中对dataframe修改列名。df = sqlContext.read.parquet("/user/用户名/123.parquet")##########df数据实例linkPh     ph123        456##########把列名分别修改为name和valuedf.selectExpr("linkPh as name","ph as

#python
R语言 关于package'***' is not available(for R version 3.4.1)

最近下载了最新的R版本后,在下载包的时候经常碰到这样的错误:package'***' is not available(for R version 3.4.1)可使用下面的代码进行安装:source("http://bioconductor.org/biocLite.R")biocLite("包名")将会下载BiocInstaller包,通过该包可以更好的下载或更新Biocon

深度学习算法之CNN、RNN、LSTM公式推导

转载自https://blog.csdn.net/sinat_22336563/article/details/71216291。整个推导过程首先一定对网络的结构有清醒的认知,所有变量的下角标都能一一对应到网络结构上;然后就是链式求导了。一、CNN公式推导1、前向传播假设CNN共三层,第一层为输入层,第二层为隐藏层,第三层为输出层。定义:第一层与第二层之间的参数为WihWih,...

【转载】如何理解卷积神经网络中的通道(channel)

原文链接:https://blog.csdn.net/weixin_38481963/article/details/109920512在卷积神经网络中我们通常需要输入 in_channels 和 out_channels ,即输入通道数和输出通道数,它们代表什么意思呢?本文将给出一个形象的理解。对于通道的理解可以参考下面的这篇文章:【CNN】理解卷积神经网络中的通道 channel这里我稍微总结

【转载】Hinton“深度学习之父”和“神经网络先驱”,新论文Capsule

Hinton“深度学习之父”和“神经网络先驱”,新论文Capsule将推翻自己积累了30年的学术成果时Hinton“深度学习之父”和“神经网络先驱”,新论文Capsule将推翻自己积累了30年的学术成果时在论文中,Capsule被Hinton大神定义为这样一组神经元:其活动向量所表示的是特定实体类型的实例化参数。他的实验表明,鉴别式训练的多层Capsule系统,在MNIST手写数据集上表现出目前最

深度学习算法之CNN、RNN、LSTM公式推导

转载自https://blog.csdn.net/sinat_22336563/article/details/71216291。整个推导过程首先一定对网络的结构有清醒的认知,所有变量的下角标都能一一对应到网络结构上;然后就是链式求导了。一、CNN公式推导1、前向传播假设CNN共三层,第一层为输入层,第二层为隐藏层,第三层为输出层。定义:第一层与第二层之间的参数为WihWih,...

【转载】Hinton“深度学习之父”和“神经网络先驱”,新论文Capsule

Hinton“深度学习之父”和“神经网络先驱”,新论文Capsule将推翻自己积累了30年的学术成果时Hinton“深度学习之父”和“神经网络先驱”,新论文Capsule将推翻自己积累了30年的学术成果时在论文中,Capsule被Hinton大神定义为这样一组神经元:其活动向量所表示的是特定实体类型的实例化参数。他的实验表明,鉴别式训练的多层Capsule系统,在MNIST手写数据集上表现出目前最

    共 11 条
  • 1
  • 2
  • 请选择