logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

如何装docker

由于系统软件不能升级,电脑公用,也不能重装系统,只能在此基础上研究如何装上docker, 今天成功了,庆祝一下。

#eureka#java#云原生
Datawhale 大模型算法全栈基础篇 202602第1次笔记

核心区别:你配置的是 conda 的清华镜像(只对 conda 命令生效),而 pip 默认用了教育网镜像(失效),二者互不关联;临时镜像源成功的原因-i参数临时让 pip 改用清华 pip 镜像,该镜像包全、同步及时,能找到适配的包;后续建议:按之前的方法配置 pip 的永久清华镜像,这样后续用就不用每次加-i参数了。简单来说,你之前只给 “conda 这个工具” 配了清华镜像,而 “pip 这

Datawhale 大模型算法全栈基础篇 202602第2次笔记

完整地运行了一个基于 TF-IDF 和全连接网络的文本分类项目,从数据加载到训练、评估、推理全部走通。

#算法
Datawhale 大模型算法全栈基础篇 202602第3次笔记

问题的实现正确做法(参考材料)变长序列处理未使用,直接输入填充后的序列使用打包,避免填充干扰最终隐藏状态提取使用使用hidden状态,并根据双向性拼接序列长度传递未传递lengths给模型collate_fn返回lengths,模型接收lengths数据增强无随机 Token 遮盖Dropout 位置仅最后全连接前LSTM 层间 Dropout(时)训练/推理时长度处理未传递长度,未使用pack在

#算法#rnn
Datawhale 大模型算法全栈基础篇 202602第4次笔记

想象一下,要把一句中文翻译成英文,不能一个词一个词地翻译,因为两种语言的词序和长度可能不一样。比如:中文:“我爱人工智能”(3个词)英文:“I love artificial intelligence”(4个词)怎么办?先完整地读懂中文句子,理解它的意思。然后根据理解的意思,用英文把这句话说出来。这就是Seq2Seq(序列到序列)的核心思想。编码器(Encoder):负责“阅读”输入序列(如中文)

#算法
Datawhale 大模型算法全栈基础篇 202602第5次笔记

LSTM 需要大量数据才能学习到有效的词向量和语义表示,而 BERT 通过预训练弥补了数据不足。Transformer 的自注意力机制比 RNN 更适合捕捉长距离依赖,但在小样本下这个优势不显著,反而容易过拟合。实验结果验证了预训练模型在小样本场景下的实用价值。我们用几行代码就加载了一个强大的中文 BERT 模型。分词器把句子变成数字 ID,并自动添加特殊标记和填充。模型推理后,我们可以拿到每个字

文章图片
#算法
Datawhale 大模型算法全栈基础篇 202602第6次笔记

想象一下,你读了一句话:“姚明昨天在北京打篮球。普通人一眼就能看出:“姚明”是个人,“北京”是个地方。就是让电脑也学会这种能力——从文字中找出(人名)、(地名)、(公司名)、等关键词语,并给它们贴上正确的标签。:姚明、雷军:北京、故宫:阿里巴巴、英伟达:黑神话:悟空、iPhone:昨天、2025年一个词是不是实体,取决于场景。比如“苹果”:在水果摊前 → 不是实体(普通名词)在手机讨论中 → 是组

#python#自然语言处理
Datawhale 大模型算法全栈基础篇 202602第7次笔记

我们训练好的NER模型(能识别“高血压”、“降压药”等)现在要变成一个真正的“服务”,让别人可以通过网络来调用它。在这个页面中,可以查看所有的 API 端点(Endpoints)、参数和返回结构,并直接进行调用和测试。点击右上角的 “Try it out” 按钮,然后再点击蓝色的 “Execute” 按钮,页面下方会立即显示出 API 的执行结果。"text": "患者自述发热、咳嗽,伴有轻微头痛

第9章 机器学习与统计模型

这一章重点探讨统计模型和机器学习模型,两个大的主题都建立在数据的基础之上,所以要熟练掌握对数据的处理与分析。实际上,机器学习本身就是统计模型的延伸,是在大数据背景下传统统计方法捉襟见肘了,所以才考虑引入机器学习。在学习过程中,大家会接触到大量的算法,一方面要理解算法的基本原理,另一方面又要能针对实际问题进行灵活应用。注意:本章内容是比较难以学习的一个章节,希望各位能够耐心去看完这一章。另外,大家还

文章图片
    共 38 条
  • 1
  • 2
  • 3
  • 4
  • 请选择