logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

自然语言处理——分词系统(正向最大匹配法)

算法分析正向最大匹配法,对于输入的一段文本从左至右、以贪心的方式切分出当前位置上长度最大的词。正向最大匹配法是基于词典的分词方法,其分词原理是:单词的颗粒度越大,所能表示的含义越确切。该算法主要分两个步骤:该算法主要分为两个步骤:1、一般从一个字符串的开始位置,选择一个最大长度的词长的片段,如果序列不足最大词长,则选择全部序列。2、首先看该片段是否在词典中,如果是,则算为一个分出来的词,如果不是,

#自然语言处理#算法
Bert模型介绍及代码解析(pytorch)

21.Bert(预训练模型)动机基于微调的NLP模型预训练的模型抽取了足够多的信息新的任务只需要增加一个简单的输出层注:bert相当于只有编码器的transformer基于transformer的改进每个样本是一个句子对加入额外的片段嵌入位置编码可学习[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-DwkojOLg-1649776319364)(C:\Users\pc

#深度学习#自然语言处理#bert
数学建模比赛题型划分、常用算法及其适用场景

目录题型划分、常用算法及其适用场景常见赛题类型算法体系分类常用算法分类数据预处理模型及应用场景优化类模型及应用场景优化类模型:聚类模型及应用场景评价模型及应用场景预测类模型及应用场景题型划分、常用算法及其适用场景常见赛题类型优化类机理分析类评价类预测类算法体系分类数据处理模型优化模型预测模型评价模型聚类分析模型常用算法分类数据预处理模型及应用场景1.插值拟合主要用于对数据的补全处理;其中样本点较少

#算法#聚类#机器学习
数学建模比赛题型划分、常用算法及其适用场景

目录题型划分、常用算法及其适用场景常见赛题类型算法体系分类常用算法分类数据预处理模型及应用场景优化类模型及应用场景优化类模型:聚类模型及应用场景评价模型及应用场景预测类模型及应用场景题型划分、常用算法及其适用场景常见赛题类型优化类机理分析类评价类预测类算法体系分类数据处理模型优化模型预测模型评价模型聚类分析模型常用算法分类数据预处理模型及应用场景1.插值拟合主要用于对数据的补全处理;其中样本点较少

#算法#聚类#机器学习
pagerank算法详解

目录一、pagerank定义两个重要假设二、pagerank算法公式定义计算演示矩阵化计算三、存在的两个问题问题1.Dead Ends问题2.Spider Traps一、pagerank定义入链数:指向该节点的链接数出链数:由该节点指出的链接数以上图为例:A的入链数为1,出链数为3,所以将由A指向其他节点的边权重设置为1/3,表示A访问B、C、D节点的概率均为1/3两个重要假设数量假设:在Web图

#自然语言处理
BertTokenizer的使用方法(超详细)

convert_tokens_to_ids是将分词后的token转化为id序列,而encode包含了分词和token转id过程,即encode是一个更全的过程,另外,encode默认使用basic的分词工具,以及会在句子前和尾部添加特殊字符[CLS]和[SEP],无需自己添加。从下可以看到,虽然encode直接使用tokenizer.tokenize()进行词拆分,会保留头尾特殊字符的完整性,但是

#人工智能#深度学习#python +1
卷积神经网络CNN原理+代码(pytorch实现MNIST集手写数字分类任务)

目录卷积神经网络前言卷积运算:卷积运算中几个常用的参数1.padding2.stride3.Max Pooling Layer实战演练设计一个卷积神经网络GPU的使用整体代码:运行结果卷积神经网络前言若将图像数据输入全连接层,可能会导致丧失一些位置信息卷积神经网络将图像按照原有的空间结构保存,不会丧失位置信息。卷积运算:1.以单通道为例:将将input中选中的部分与kernel进行数乘 :以上图为

#cnn#深度学习#计算机视觉
Zero-shot(零次学习)简介

所以模型需要知道的信息是马的样本、老虎的样本、熊猫的样本和样本的标签,以及关于前三种动物和斑马的描述。假设我们已知驴子和马的形态特征,又已知老虎和鬣狗都是又相间条纹的动物,熊猫和企鹅是黑白相间的动物,再次的基础上,我们定义斑马是黑白条纹相间的马科动物。如今十分火热的纯监督模型往往需要足够多的样本才能训练出足够好的模型,并且用熊猫训练出来的分类器,只能对熊猫进行分类,其他物种都无法识别,也无法进行特

#深度学习
pagerank算法详解

目录一、pagerank定义两个重要假设二、pagerank算法公式定义计算演示矩阵化计算三、存在的两个问题问题1.Dead Ends问题2.Spider Traps一、pagerank定义入链数:指向该节点的链接数出链数:由该节点指出的链接数以上图为例:A的入链数为1,出链数为3,所以将由A指向其他节点的边权重设置为1/3,表示A访问B、C、D节点的概率均为1/3两个重要假设数量假设:在Web图

#自然语言处理
Numpy基础——数组操作大全(修改、翻转、合并、分割、添加与删除、去重)

np.reshape()np.flatten()np.resize()np.tranpose() np.concatenate()np.stack() np.hstack()np.vstack()np.split()np.hsplitnp.vsplit()np.appemd()np.delete()np.unique()

#python
    共 13 条
  • 1
  • 2
  • 请选择