
简介
该用户还未填写简介
擅长的技术栈
可提供的服务
暂无可提供的服务
paddlenlp使用预训练模型实现快递单信息抽取中CrossEntropyLoss()指定weight报错
出现这种问题,一般是由调用udf的过程报错,报错的几个原因如下:(1)引用pyspark.sql.functions的方法覆盖python本身的方法;(2)没有处理None值
1.数据思维数据分析中常见的三种核心思维有结构化思维、公式化思维和业务化思维。1.1 结构化思维结构化思维是针对某个特定问题绘制思维导图(常用工具Xmind),从多个独立且全面的角度进行分析。1.2 公式化思维公式化思维是对于思维导图中的每一个角度,给出一个可量化的公式。1.3 业务化思维业务化思维是指进行数据分析时要充分考虑业务背景。下面以一个“如何预估北...
BiLSTM + attention 以BiLSTM 的输出output_fw+output_bw作为输入,先计算每个词在句子中的贡献,然后以加权的方式对embedding进行融合。计算词对句子的贡献时,以BiLSTM的输出经过一个manual操作,之后进行softmax即可得到,具体可以看代码实现部分。有几个问题,需要思考一下:(1)BiLSTM 的输出output_fw+output_bw如果
1. 卡方检验卡方检验是用途非常广的一种假设检验方法,它在分类资料统计推断中的应用,包括:两个率或两个构成比比较的卡方检验;多个率或多个构成比比较的卡方检验以及分类资料的相关分析等。卡方检验就是统计样本的实际观测值与理论推断值之间的偏离程度,实际观测值与理论推断值之间的偏离程度就决定卡方值的大小,如果卡方值越大,二者偏差程度越大;反之,二者偏差越小;若两个值完全相等时,卡方值就为0,表明理...
1. 什么是正态性和方差齐性2.为什么要进行正态性检验和方差齐性检验3. 如何进行正态性检验和方差齐性检验
1.数据思维数据分析中常见的三种核心思维有结构化思维、公式化思维和业务化思维。1.1 结构化思维结构化思维是针对某个特定问题绘制思维导图(常用工具Xmind),从多个独立且全面的角度进行分析。1.2 公式化思维公式化思维是对于思维导图中的每一个角度,给出一个可量化的公式。1.3 业务化思维业务化思维是指进行数据分析时要充分考虑业务背景。下面以一个“如何预估北...
1. 运行TensorBoardtensorboard --logdir=/path/log注:默认端口为6006,可通过参数--port=8090来设置。2. 浏览器输入http:host:6006即可访问模型网络结构可查看GRAPHS部分图 fasttext网络结构监控指标信息可查看SCALAR...
这几天看到了浅层网络(仅含有一层隐藏层单元的神经网络)的设计原理及思想,为了加深理解及记忆,下面做个总结。 为了简化原理思想,假设现有隐藏层只有四个隐藏单元的两层神经网络,如下图所示: 和单个神经元工作原理类似,包括前向传播和后向传播两个过程。其中,后向传播多了几个公式推导。因此,这里主要推导后向传播的相关公式。1. 前向传播 假设
在之前的文章中,介绍了神经网络的概念和算法思想,甚至给出了公式推导。但依然没有掌握神经网络的精髓,于是打算进一步学习就在网上观看了吴恩达大佬的《神经网络和深度学习》这门课程,觉得收获很大。目前只学习了单个神经元的原理及应用,下面简单总结一下。1. 损失函数的定义 与之前介绍的单个神经元的工作原理不同之处在于损失函数的定义,这里把损失函数定义为: 推导思路:利用