本文档介绍了PaddleClas配置文件(ppcls/configs/*.yaml
)中各参数的含义,以便您更快地自定义或修改超参数配置。
此处以ResNet50_vd
在ImageNet-1k
上的训练配置为例,详解各个参数的意义。配置路径。
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
checkpoints | 断点模型路径,用于恢复训练 | null | str |
pretrained_model | 预训练模型路径 | null | str |
output_dir | 保存模型路径 | "./output/" | str |
save_interval | 每隔多少个epoch保存模型 | 1 | int |
eval_during_train | 是否在训练时进行评估 | True | bool |
eval_interval | 每隔多少个epoch进行模型评估 | 1 | int |
epochs | 训练总epoch数 | int | |
print_batch_step | 每隔多少个mini-batch打印输出 | 10 | int |
use_visualdl | 是否是用visualdl可视化训练过程 | False | bool |
image_shape | 图片大小 | [3,224,224] | list, shape: (3,) |
save_inference_dir | inference模型的保存路径 | "./inference" | str |
eval_mode | eval的模式 | "classification" | "retrieval" |
to_static | 是否改为静态图模式 | False | True |
ues_dali | 是否使用dali库进行图像预处理 | False | True |
注:pretrained_model
也可以填写存放预训练模型的http地址。
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
name | 模型结构名字 | ResNet50 | PaddleClas提供的模型结构 |
class_num | 分类数 | 1000 | int |
pretrained | 预训练模型 | False | bool, str |
注:此处的pretrained可以设置为True
或者False
,也可以设置权重的路径。另外当Global.pretrained_model
也设置相应路径时,此处的pretrained
失效。
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
CELoss | 交叉熵损失函数 | —— | —— |
CELoss.weight | CELoss的在整个Loss中的权重 | 1.0 | float |
CELoss.epsilon | CELoss中label_smooth的epsilon值 | 0.1 | float,0-1之间 |
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
name | 优化器方法名 | "Momentum" | "RmsProp"等其他优化器 |
momentum | momentum值 | 0.9 | float |
lr.name | 学习率下降方式 | "Cosine" | "Linear"、"Piecewise"等其他下降方式 |
lr.learning_rate | 学习率初始值 | 0.1 | float |
lr.warmup_epoch | warmup轮数 | 0 | int,如5 |
regularizer.name | 正则化方法名 | "L2" | ["L1", "L2"] |
regularizer.coeff | 正则化系数 | 0.00007 | float |
注:lr.name
不同时,新增的参数可能也不同,如当lr.name=Piecewise
时,需要添加如下参数:
lr:
name: Piecewise
learning_rate: 0.1
decay_epochs: [30, 60, 90]
values: [0.1, 0.01, 0.001, 0.0001]
添加方法及参数请查看learning_rate.py。
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
name | 读取数据的类的名字 | ImageNetDataset | VeriWild等其他读取数据类的名字 |
image_root | 数据集存放的路径 | ./dataset/ILSVRC2012/ | str |
cls_label_path | 数据集标签list | ./dataset/ILSVRC2012/train_list.txt | str |
transform_ops | 单张图片的数据预处理 | —— | —— |
batch_transform_ops | batch图片的数据预处理 | —— | —— |
transform_ops中参数的意义:
功能名字 | 参数名字 | 具体含义 |
---|---|---|
DecodeImage | to_rgb | 数据转RGB |
channel_first | 按CHW排列的图片数据 | |
RandCropImage | size | 随机裁剪 |
RandFlipImage | 随机翻转 | |
NormalizeImage | scale | 归一化scale值 |
mean | 归一化均值 | |
std | 归一化方差 | |
order | 归一化顺序 | |
CropImage | size | 裁剪大小 |
ResizeImage | resize_short | 按短边调整大小 |
batch_transform_ops中参数的含义:
功能名字 | 参数名字 | 具体含义 |
---|---|---|
MixupOperator | alpha | Mixup参数值,该值越大增强越强 |
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
name | sampler类型 | DistributedBatchSampler | DistributedRandomIdentitySampler等其他Sampler |
batch_size | 批大小 | 64 | int |
drop_last | 是否丢掉最后不够batch-size的数据 | False | bool |
shuffle | 数据是否做shuffle | True | bool |
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
num_workers | 数据读取线程数 | 4 | int |
use_shared_memory | 是否使用共享内存 | True | bool |
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
TopkAcc | TopkAcc | [1, 5] | list, int |
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
infer_imgs | 被infer的图像的地址 | docs/images/whl/demo.jpg | str |
batch_size | 批大小 | 10 | int |
PostProcess.name | 后处理名字 | Topk | str |
PostProcess.topk | topk的值 | 5 | int |
PostProcess.class_id_map_file | class id和名字的映射文件 | ppcls/utils/imagenet1k_label_list.txt | str |
注:Infer模块的transforms
的解释参考数据读取模块中的dataset中transform_ops
的解释。
注:此处以MobileNetV3_large_x1_0
在ImageNet-1k
上蒸馏MobileNetV3_small_x1_0
的训练配置为例,详解各个参数的意义。配置路径。这里只介绍与分类模型有区别的参数。
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
name | 模型结构名字 | DistillationModel | —— |
class_num | 分类数 | 1000 | int |
freeze_params_list | 冻结参数列表 | [True, False] | list |
models | 模型列表 | [Teacher, Student] | list |
Teacher.name | 教师模型的名字 | MobileNetV3_large_x1_0 | PaddleClas中的模型 |
Teacher.pretrained | 教师模型预训练权重 | True | 布尔值或者预训练权重路径 |
Teacher.use_ssld | 教师模型预训练权重是否是ssld权重 | True | 布尔值 |
infer_model_name | 被infer模型的类型 | Student | Teacher |
注:
1.list在yaml中体现如下:
freeze_params_list:
- True
- False
2.Student的参数情况类似,不再赘述。
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
DistillationCELoss | 蒸馏的交叉熵损失函数 | —— | —— |
DistillationCELoss.weight | Loss权重 | 1.0 | float |
DistillationCELoss.model_name_pairs | ["Student", "Teacher"] | —— | —— |
DistillationGTCELoss.weight | 蒸馏的模型与真实Label的交叉熵损失函数 | —— | —— |
DistillationGTCELos.weight | Loss权重 | 1.0 | float |
DistillationCELoss.model_names | 与真实label作交叉熵的模型名字 | ["Student"] | —— |
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
DistillationTopkAcc | DistillationTopkAcc | 包含model_key和topk两个参数 | —— |
DistillationTopkAcc.model_key | 被评估的模型 | "Student" | "Teacher" |
DistillationTopkAcc.topk | Topk的值 | [1, 5] | list, int |
注:DistillationTopkAcc
与普通TopkAcc
含义相同,只是只用在蒸馏任务中。
注:此处以ResNet50
在LogoDet-3k
上的训练配置为例,详解各个参数的意义。配置路径。这里只介绍与分类模型有区别的参数。
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
name | 模型结构 | "RecModel" | ["RecModel"] |
infer_output_key | inference时的输出值 | “feature” | ["feature", "logits"] |
infer_add_softmax | infercne是否添加softmax | False | [True, False] |
Backbone.name | Backbone的名字 | ResNet50_last_stage_stride1 | PaddleClas提供的其他backbone |
Backbone.pretrained | Backbone预训练模型 | True | 布尔值或者预训练模型路径 |
BackboneStopLayer.name | Backbone中的输出层名字 | True | Backbone中的特征输出层的full_name |
Neck.name | 网络Neck部分名字 | VehicleNeck | 需传入字典结构,Neck网络层的具体输入参数 |
Neck.in_channels | 输入Neck部分的维度大小 | 2048 | 与BackboneStopLayer.name层的大小相同 |
Neck.out_channels | 输出Neck部分的维度大小,即特征维度大小 | 512 | int |
Head.name | 网络Head部分名字 | CircleMargin | Arcmargin等 |
Head.embedding_size | 特征维度大小 | 512 | 与Neck.out_channels保持一致 |
Head.class_num | 类别数 | 3000 | int |
Head.margin | CircleMargin中的margin值 | 0.35 | float |
Head.scale | CircleMargin中的scale值 | 64 | int |
注:
1.在PaddleClas中,Neck
部分是Backbone与embedding层的连接部分,Head
部分是embedding层与分类层的连接部分。
2.BackboneStopLayer.name
的获取方式可以通过将模型可视化后获取,可视化方式可以参考Netron或者visualdl。
3.调用tools/export_model.py
会将模型的权重转为inference model,其中infer_add_softmax
参数会控制是否在其后增加Softmax
激活函数,代码中默认为True
(分类任务中最后的输出层会接Softmax
激活函数),识别任务中特征层无须接激活函数,此处要设置为False
。
参数名字 | 具体含义 | 默认值 | 可选值 |
---|---|---|---|
Recallk | 召回率 | [1, 5] | list, int |
mAP | 平均检索精度 | None | None |