logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

ubuntu系统linux下安装指定版本的gcc方法

1:查看当前linux系统的gcc版本。2:查看和cuda版本对应的gcc版本。3:安装和cuda对应版本的gcc。4:建立gcc和cuda的软链接。

#linux#ubuntu
大模型适配昇腾300I DUO服务器出现的错误

大模型适配昇腾300I DUO服务器遇到的问题解决方案

文章图片
#语言模型
使用Pandas对数据集进行操作

1 数据信息如下表所示

#python
进行领域大模型的训练技巧介绍

答:如果仅仅使用领域数据集进行模型训练,模型很容易出现灾难性遗忘现象,为了解决这个问题通常在领域训练的过程中加入通用数据集。主要与领域数据量有关系,当数据量没有那么多时,一般领域数据与通用数据的比例在1:5到1:10之间是比较合适的。答:通过分析发现现有的开源大模型进行预训练的过程中会加入书籍、论文等数据。主要是因为这些数据的数据质量较高,领域相关性比较强,知识覆盖率(密度)较大,可以让模型更适应

文章图片
#语言模型#深度学习
大模型适配昇腾300I DUO服务器出现的错误

大模型适配昇腾300I DUO服务器遇到的问题解决方案

文章图片
#语言模型
基于本体的自动问答系统

自然语言处理的一个分支–自动问答系统本体(Ontology)的应用:(1)信息检索(2)自动问答分词停用此词处理相似度计算词语相似度计算句子相似度计算改

大模型适配昇腾300I DUO服务器出现的错误

大模型适配昇腾300I DUO服务器遇到的问题解决方案

文章图片
#语言模型
docker容器内运行pytorch多gpu报错 RuntimeError: NCCL Error 2: unhandled system error

尝试了多种方法不行比如。最终解决该问题的方法是。

文章图片
#python
进行领域大模型的训练技巧介绍

答:如果仅仅使用领域数据集进行模型训练,模型很容易出现灾难性遗忘现象,为了解决这个问题通常在领域训练的过程中加入通用数据集。主要与领域数据量有关系,当数据量没有那么多时,一般领域数据与通用数据的比例在1:5到1:10之间是比较合适的。答:通过分析发现现有的开源大模型进行预训练的过程中会加入书籍、论文等数据。主要是因为这些数据的数据质量较高,领域相关性比较强,知识覆盖率(密度)较大,可以让模型更适应

文章图片
#语言模型#深度学习
    共 14 条
  • 1
  • 2
  • 请选择