我尝试复现了 ALDI, USIM, CCFCRec, GoRec 等模型的结果,但效果难以调出来,我猜测可能是超参数调试的问题,这极大影响了作为 baseline 时的公平性
请问我该如何配置这些模型
解决方法
我们是否可以建立一个 config/{dataset name}/{model_name}.yaml 的参数目录,使用 yaml 文件管理模型的超参数以建立公平比较
进一步,我们可以使用 {madel_name}.yaml 管理最优超参数(并欢迎所有使用者报告更优的性能),使用 {model_name}_search.yaml 管理超参搜索范围,这样可以极大地便利复现操作
我尝试复现了 ALDI, USIM, CCFCRec, GoRec 等模型的结果,但效果难以调出来,我猜测可能是超参数调试的问题,这极大影响了作为 baseline 时的公平性
请问我该如何配置这些模型
解决方法
我们是否可以建立一个
config/{dataset name}/{model_name}.yaml的参数目录,使用 yaml 文件管理模型的超参数以建立公平比较进一步,我们可以使用
{madel_name}.yaml管理最优超参数(并欢迎所有使用者报告更优的性能),使用{model_name}_search.yaml管理超参搜索范围,这样可以极大地便利复现操作