Skip to content

OpenCollab-Eval 0.9.0

Choose a tag to compare

@KaiEureka KaiEureka released this 01 Oct 17:01
· 92 commits to main since this release
v0.9.0
4346fc0

OpenCollab-Eval 0.9.0 配合 OpenCollab 0.9.0 发布,将完整 ICLR 评测整合纳入正式版本。

生成层统一角色题面、公开运行配置、原生团队与协作工作流,并增加独立候选及批量生成。官方评分接入 SWE-bench 5.0.2,按具体尝试关联结果、候选和用量。

实验管理提供声明式批次、题目采样、重试与替换、任务观察及离线分析。报告保留采用结果与历史尝试的对应关系,候选提取和运行状态使用同一套公开接口。

安装依赖、远端运行环境、CI 和配套 wheel 验证统一采用 OpenCollab 0.9.x。CI 固定在 OC 0.9.0 的正式发布提交,版本边界验证覆盖旧版本拒绝、0.9.x 接受和后续未支持版本拒绝。

附件包含源码包、wheel 和 SHA256SUMS。安装时请配合 OC 0.9.0 的 wheel 使用。

维护者已要求按 OC 0.9.0 相同方式发布。本次沿用已确认的远端标签保护配置豁免,使用可验证签名标签并保持已发布标签固定。