Skip to content

Plugin Value Lab 1.0.0-rc.1

Pre-release
Pre-release

Choose a tag to compare

@HERRY423 HERRY423 released this 04 Oct 03:56
· 7 commits to main since this release

Plugin Value Lab 1.0.0-rc.1 Candidate Release

概要 / Overview

Plugin Value Lab(PVL)发布首个正式候选版本 v1.0.0-rc.1。本候选版本冻结了候选提交代码与全套安装分发包,通过了离线全量测试(1567 项测试无跳过、842 项子测试通过)、功能范围冻结检查、社区策略校验、插件规范验证以及全新隔离虚拟环境下的端到端工程可用性验收。

此外,本版本正式确立并规范了科学对照评测的四大严谨性支柱(Four Rigor Pillars)。


四大严谨性支柱 / Four Rigor Pillars

  1. 真实两臂隔离(True Two-Arm Isolation):

    • 每次评估尝试严格绑定全新独立会话(fresh_session: true,prior_messages: 0,parent_session_id: null,memory_enabled: false,shared_artifacts: false)。
    • 会话与请求 ID(session_id, request_id)全局去重,严防跨尝试状态泄漏。
    • WITH 臂严格仅暴露指定候选插件及声明的公共基础工具;WITHOUT 臂严格零插件暴露(plugins: [])。
    • 运行上下文密码学摘要(context_sha256)与事前冻结方案完全一致。
  2. 完整工具清单(Complete Effective Tool Inventory):

    • 清单凭证必须源自宿主真实生效列表:source_kind: "host_effective_inventory",显式声明 inventory_complete: true。
    • 拒绝未消费的分页或截断(has_more: false, truncated: false, next_cursor: null)。
    • 每个暴露的工具均计算并比对规范 Schema 定义的 SHA-256 摘要(definition_sha256),严禁任何隐形工具注入或未声明的功能扩展。
  3. 原始产物封存与重新评分(Raw Artifact Preservation & Local Re-scoring):

    • 封存大模型输出的 UTF-8 原始原生文本(raw_output),禁止在评分前进行中间润色或摘要损耗。
    • 强制绑定哈希指纹:output_sha256 = sha256(raw_output.encode("utf-8"))。
    • 评分器在本地基于客观规则(正则、AST 语法树、JSON Schema、科学校验器)对原始产物重新评分,零信任外部宿主上报标记或模型自称的“任务已完成”声明。
  4. 断线/取消/重试的原尝试对账(Attempt Journal Reconciliation):

    • 基于不可篡改触发器的 SQLite 本地持久化日志(AttemptJournal),覆盖 prepared → dispatched → running → 终态全生命周期。
    • 网络断线或宿主失联(unknown)必须通过外部凭证(source_ref)向原始尝试进行回溯对账。
    • 分母守恒原则:取消(cancelled)与失败(failed)尝试一律保留在有效样本量分母中,杜绝幸存者偏差。
    • 首次尝试首要性:诊断重试必须显式绑定 retry_of = primary_attempt_id,主要效应分析永久以首次尝试为准,重试结果不得篡改或掩盖首次失败。
    • 全量结算对账:所有发出的尝试(含失败、重试、取消)产生的 Token 消耗和供应商成本必须全额纳入累计结算账本。

冻结安装包资产 / Frozen Distribution Packages

文件名 / Asset 文件大小 / Bytes SHA-256 校验和 / Digest
plugin_value_lab-1.0.0rc1-py3-none-any.whl 587,926 95423b27370889c47e5bb5c340a5c179649f4d4b42ad2168c7fc049a7c826bf4
plugin-value-lab-marketplace-1.0.0-rc.1.zip 2,048,301 da7651c7556dbb4ea68efc86a4ccd5bc8ccfbd07d7015fc4e048cb12ef8c2825
plugin-value-lab-agent-plugins-1.0.0-rc.1.zip 1,997,259 b938d13b7d285284696eaad96604b567d4c03421fc6c067824c0706d24d62559
release-evidence.json 1,267 411ef15f09c5e409e26d4e94c7b9e5da5429a56962ca808ef1cd1a1e548742f0
SHA256SUMS.txt 419 864e9f3ebf3bae84e1de0d1716af96dd6b448727db60d76a13d97ca297cf08dc

快速安装与离线校验 / Installation & Verification

# 校验全部资产
sha256sum -c SHA256SUMS.txt

# 在独立虚拟环境中安装 Wheel
python -m pip install plugin_value_lab-1.0.0rc1-py3-none-any.whl

# 验证 CLI
pvl --version
# 输出: 1.0.0-rc.1

边界声明 / Limitations:本候选发布仅代表工程代码、测试门禁与打包资产的自洽验收;不代表已获得第三方独立机构采用,亦不代表已取得任何特定插件普遍优越性的外部科学定论。