Task05：PyTorch进阶训练技巧1. 自定义损失函数1.1 函数方式1.2 类方式2. 动态调整学习率2.1 官方API2.2 自定义scheduler3. 模型微调3.1 概念3.2 流程3.3 图示3.4 实践4. 半精度训练4.1 概念4.2 实践1. 自定义损失函数1.1 函数方式通过输出值和目标值进行计算，返回损失值>>> import torch>&gt

TensorBoard记录模型每一层的feature map、权重和训练loss等，并保存在用户指定的文件夹中，通过网页形式进行可视化展示。使用add_scalar方法，对连续变量（或时序变量）的变化过程进行可视化展示。使用PyTorch提供的hook结构，得到网络在前向传播过程中的特征图。使用add_histogram方法，对参数（或变量）的分布进行可视化展示。使用add_graph方法，在Te

Jbd00：前言1. Ubuntu2. 环境安装1. Ubuntu最近气温升高天气渐热，手里的全能本发热严重，开虚拟机的话烫到爆炸，所以还是继续用腾讯云吧，从centos换到ubuntu：ubuntu@VM-0-12-ubuntu:/opt$ uname -aLinux VM-0-12-ubuntu 5.4.0-96-generic #109-Ubuntu SMP Wed Jan 12 16:49