Skip to content

结果复现 - 对于部分代码的复现效果不佳 #16

@qyzl7

Description

@qyzl7

我尝试复现了 ALDI, USIM, CCFCRec, GoRec 等模型的结果,但效果难以调出来,我猜测可能是超参数调试的问题,这极大影响了作为 baseline 时的公平性

请问我该如何配置这些模型

解决方法

我们是否可以建立一个 config/{dataset name}/{model_name}.yaml 的参数目录,使用 yaml 文件管理模型的超参数以建立公平比较

进一步,我们可以使用 {madel_name}.yaml 管理最优超参数(并欢迎所有使用者报告更优的性能),使用 {model_name}_search.yaml 管理超参搜索范围,这样可以极大地便利复现操作

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Projects

    No projects

    Milestone

    No milestone

    Relationships

    None yet

    Development

    No branches or pull requests

    Issue actions