logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

解决linux终端输入clear无效的问题

linux 终端clear命令无效,并返回:terminals database is inaccessible。step1: vim ~/.bashrc在里面添加如下信心。

文章图片
#linux
scp通过跳板机向服务器传文件的方法

在实际情况下如果目标服务器无法通过ssh直接连接,需要跳板机才能连接,如何使用scp呢?目标服务器host2: 192.168.42.9 user:admin2。跳板机host1:192.168.32.7user:admin1。通过如下命令用scp命令进行传输。

文章图片
#服务器#运维
进行领域大模型的训练技巧介绍

答:如果仅仅使用领域数据集进行模型训练,模型很容易出现灾难性遗忘现象,为了解决这个问题通常在领域训练的过程中加入通用数据集。主要与领域数据量有关系,当数据量没有那么多时,一般领域数据与通用数据的比例在1:5到1:10之间是比较合适的。答:通过分析发现现有的开源大模型进行预训练的过程中会加入书籍、论文等数据。主要是因为这些数据的数据质量较高,领域相关性比较强,知识覆盖率(密度)较大,可以让模型更适应

文章图片
#语言模型#深度学习
docker容器内运行pytorch多gpu报错 RuntimeError: NCCL Error 2: unhandled system error

尝试了多种方法不行比如。最终解决该问题的方法是。

文章图片
#python
AttributeError: module ‘tensorflow‘ has no attribute ‘compat‘

安装tensorflow2.0后出现以上bug,解决该bug的方法是让tensorflow-estimator的版本和tensorflow的版本一致就可以。

#自然语言处理#tensorflow
wget: unable to resolve host address解决方案

解决该问题的方法是:修改/etc/resolv.conf文件,添加nameserver信息就可以,下面给出的是两个通用的谷歌域名服务器,也可以换成自己的服务器。当使用wget进行下载资源的时候,比如执行下面的命令。

#linux
pytorch虚拟环境创建

1:创建环境conda create -n pytorch python=3pytorch:是虚拟环境的名字2:删除环境conda remove -n pytorch --all3:激活环境conda activate pytorch or source activate pytorch4:关闭环境deactivate pytorch5:安装环境`url:https://pytorch.org/g

#linux#pytorch
anaconda瘦身

在开发过程中anaconda占用太多的存储空间,瘦身命令如下:# 删除掉从不使用的packages# Remove unused packages from writable package caches.conda clean -p# 删除掉tar包conda clean -t# Remove index cache, lock files, unused cache packages,and

#linux
docker容器内运行pytorch多gpu报错 RuntimeError: NCCL Error 2: unhandled system error

尝试了多种方法不行比如。最终解决该问题的方法是。

文章图片
#python
    共 23 条
  • 1
  • 2
  • 3
  • 请选择