gitlink-cli/examples/research/repro-audit/docs/verification.md

1.5 KiB
Raw Blame History

真实平台验证记录

验证日期2026-07-05平台生产环境 gitlink.org.cnCLI包含 file 命令组PR #330的本地构建。

1. 论文笔记仓库(预期低分)

python3 scripts/repro_audit.py --owner GengzhaoWang --repo UAV-Paper

2. 科研工具代码仓库(中等分,建议明确)

python3 scripts/repro_audit.py --owner momomym --repo paper-summarizer
  • 结果:58/100 — C存在明显缺口,退出码 2
  • 检出LICENSE 、requirements.txt 、scripts 入口 、tests
  • 缺口README 无运行章节(部分分 8/15、无引用信息、无数据说明、无 release
  • 完整报告:../examples/demo-outputs/repro-audit-momomym-paper-summarizer.md

两个真实仓库得分区分度显著8 vs 58每项证据均可在仓库网页人工复核。

3. 确定性回归护栏

python3 tests/test_audit.py
# Ran 7 tests ... OK

覆盖满分样例100/A、空仓库0/D、README 无运行说明的部分分、README 内引用识别、scripts 目录作为入口、同输入同输出确定性、失败项必附修复建议。