Repository navigation
Plugin Value Lab 1.0.0-rc.1
Pre-release
Pre-release
Plugin Value Lab 1.0.0-rc.1 Candidate Release
概要 / Overview
Plugin Value Lab(PVL)发布首个正式候选版本 v1.0.0-rc.1。本候选版本冻结了候选提交代码与全套安装分发包,通过了离线全量测试(1567 项测试无跳过、842 项子测试通过)、功能范围冻结检查、社区策略校验、插件规范验证以及全新隔离虚拟环境下的端到端工程可用性验收。
此外,本版本正式确立并规范了科学对照评测的四大严谨性支柱(Four Rigor Pillars)。
四大严谨性支柱 / Four Rigor Pillars
-
真实两臂隔离(True Two-Arm Isolation):
- 每次评估尝试严格绑定全新独立会话(
fresh_session: true,prior_messages: 0,parent_session_id: null,memory_enabled: false,shared_artifacts: false)。 - 会话与请求 ID(
session_id,request_id)全局去重,严防跨尝试状态泄漏。 - WITH 臂严格仅暴露指定候选插件及声明的公共基础工具;WITHOUT 臂严格零插件暴露(
plugins: [])。 - 运行上下文密码学摘要(
context_sha256)与事前冻结方案完全一致。
- 每次评估尝试严格绑定全新独立会话(
-
完整工具清单(Complete Effective Tool Inventory):
- 清单凭证必须源自宿主真实生效列表:
source_kind: "host_effective_inventory",显式声明inventory_complete: true。 - 拒绝未消费的分页或截断(
has_more: false,truncated: false,next_cursor: null)。 - 每个暴露的工具均计算并比对规范 Schema 定义的 SHA-256 摘要(
definition_sha256),严禁任何隐形工具注入或未声明的功能扩展。
- 清单凭证必须源自宿主真实生效列表:
-
原始产物封存与重新评分(Raw Artifact Preservation & Local Re-scoring):
- 封存大模型输出的 UTF-8 原始原生文本(
raw_output),禁止在评分前进行中间润色或摘要损耗。 - 强制绑定哈希指纹:
output_sha256 = sha256(raw_output.encode("utf-8"))。 - 评分器在本地基于客观规则(正则、AST 语法树、JSON Schema、科学校验器)对原始产物重新评分,零信任外部宿主上报标记或模型自称的“任务已完成”声明。
- 封存大模型输出的 UTF-8 原始原生文本(
-
断线/取消/重试的原尝试对账(Attempt Journal Reconciliation):
- 基于不可篡改触发器的 SQLite 本地持久化日志(
AttemptJournal),覆盖prepared→dispatched→running→ 终态全生命周期。 - 网络断线或宿主失联(
unknown)必须通过外部凭证(source_ref)向原始尝试进行回溯对账。 - 分母守恒原则:取消(
cancelled)与失败(failed)尝试一律保留在有效样本量分母中,杜绝幸存者偏差。 - 首次尝试首要性:诊断重试必须显式绑定
retry_of = primary_attempt_id,主要效应分析永久以首次尝试为准,重试结果不得篡改或掩盖首次失败。 - 全量结算对账:所有发出的尝试(含失败、重试、取消)产生的 Token 消耗和供应商成本必须全额纳入累计结算账本。
- 基于不可篡改触发器的 SQLite 本地持久化日志(
冻结安装包资产 / Frozen Distribution Packages
| 文件名 / Asset | 文件大小 / Bytes | SHA-256 校验和 / Digest |
|---|---|---|
plugin_value_lab-1.0.0rc1-py3-none-any.whl |
587,926 | 95423b27370889c47e5bb5c340a5c179649f4d4b42ad2168c7fc049a7c826bf4 |
plugin-value-lab-marketplace-1.0.0-rc.1.zip |
2,048,301 | da7651c7556dbb4ea68efc86a4ccd5bc8ccfbd07d7015fc4e048cb12ef8c2825 |
plugin-value-lab-agent-plugins-1.0.0-rc.1.zip |
1,997,259 | b938d13b7d285284696eaad96604b567d4c03421fc6c067824c0706d24d62559 |
release-evidence.json |
1,267 | 411ef15f09c5e409e26d4e94c7b9e5da5429a56962ca808ef1cd1a1e548742f0 |
SHA256SUMS.txt |
419 | 864e9f3ebf3bae84e1de0d1716af96dd6b448727db60d76a13d97ca297cf08dc |
快速安装与离线校验 / Installation & Verification
# 校验全部资产
sha256sum -c SHA256SUMS.txt
# 在独立虚拟环境中安装 Wheel
python -m pip install plugin_value_lab-1.0.0rc1-py3-none-any.whl
# 验证 CLI
pvl --version
# 输出: 1.0.0-rc.1边界声明 / Limitations:本候选发布仅代表工程代码、测试门禁与打包资产的自洽验收;不代表已获得第三方独立机构采用,亦不代表已取得任何特定插件普遍优越性的外部科学定论。