深度学习调参笔记#1-正则化(weight decay)
在模型过拟合的时候,总是会想着添加正则化,在PyTorch中常用的添加正则化的方法,就是在优化器中添加`weight_decay`参数,然而,调参过程中也有一些细节需要注意。
在模型过拟合的时候,总是会想着添加正则化,在PyTorch中常用的添加正则化的方法,就是在优化器中添加`weight_decay`参数,然而,调参过程中也有一些细节需要注意。
在用Python处理数据时,经常需要进行读取遍历、复制移动、新建文件夹等操作,本文对比介绍Python中常用的各类路径操作,包括Pathlib、glob、shutil、os。