
简介
该用户还未填写简介
擅长的技术栈
未填写擅长的技术栈
可提供的服务
暂无可提供的服务
anaconda 无法安装新环境
查了好多都说要设置清华的镜像,但是我一直都有设呀,突然就不好使了,也尝试过把.condarc文件下,default那一行删除,但是也不行。最后!!!只需要把清华镜像里的https改成http就行啦?!诡异的操作conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/msys2/conda c..
知识蒸馏基础及Bert蒸馏模型
为了提高模型准确率,我们习惯用复杂的模型(网络层次深、参数量大),甚至会选用多个模型集成的模型,这就导致我们需要大量的计算资源以及庞大的数据集去支撑这个“大”模型。但是,在部署服务时,就会发现这种“大”模型推理速度慢,耗费内存/显存高,这时候我们又会想念“小”模型的好。那么,有没有一种方法能够尽可能继承大模型的泛化能力,又像小模型一样轻量级呢?今天来介绍一种模型压缩的方法——蒸馏(Distilla

到底了







