为什么代码开源了也跑不出论文的结果？
2023-08-20 阅读 23
代码开源并不意味着能够直接复现论文的结果。以下是一些可能导致代码开源后无法复现论文结果的原因：
1. 数据集差异：代码开源后，其他研究者可能使用不同的数据集来复现结果。即使数据集相似，但细微的差异也可能导致结果的不同。
2. 超参数设置：代码开源后，其他研究者可能使用不同的超参数设置来运行代码。超参数的选择可能对结果产生重大影响，不同的超参数组合可能导致不同的结果。
3. 环境配置：代码开源后，其他研究者可能在不同的硬件、操作系统或软件版本上运行代码。这些环境差异可能导致结果的不同。
4. 实现细节：代码开源后，其他研究者可能在实现细节上有所不同，例如使用不同的优化算法、损失函数或网络结构。这些差异可能会影响结果。
5. 随机性：某些算法或模型中存在随机性，例如随机初始化或随机采样。即使代码完全相同，不同的运行可能会导致不同的结果。
要复现论文的结果，除了代码开源外，还需要详细的文档说明、数据集描述、超参数设置等信息。此外，与原作者进行交流并寻求帮助也是复现结果的一种途径。
更新于 2023年08月20日
