Skip to content

Releases

v3.9.102 — 卡密小店 API 来源

Choose a tag to compare

@BeterXie BeterXie released this 22 Nov 17:01

卡密小店现可作为独立来源同步店铺和商品,价格按分转换为人民币元,保留库存、销量及原始商品链接。

主站使用平台密钥和已授权出口 IP 采集,接入现有 collector 完整批次发布;库存批次沿用已有观察值。分页缺失、来源身份冲突和漏配来源会阻止错误替换,临时网络故障保留旧报价。

验证:OCR 已完成并修复有效问题,最终修复复核无新增问题;GitHub CI 全部通过;本地 API 1514、pipeline 605、web 215、scripts 104 项通过,最后修复回归 323 项通过。真实 API 读取 9 家店铺、119 件商品。

无数据库迁移。主站私有环境需配置 KMDIAN_API_KEY;API、importer、五站前端及采集节点使用匹配版本。上线需完成一次完整采集发布验收。

v3.9.101

Choose a tag to compare

@BeterXie BeterXie released this 22 Nov 13:56

v3.9.101

包含 v3.9.100 商品分类修正。完整采集结果在低速私有链路上可能超过旧的 180 秒上传期限,失败后较早的单源检查点又会过期,触发不必要的重扫。现在完整结果包原子落盘,一小时内重试复用相同字节和真实采集时间,过期才重新采集;上传携带 Content-Length,服务端和 Worker 的上传期限为 15 分钟,仍保留租约续期、大小限制、完整性及审批检查。

无数据库结构迁移。继续部署 20261122_184720,复用原备份与回滚点。先验收 v3.9.99 的 665 来源完整包与标准发布,再部署同提交全部组件并重分类、经既有库存发布生成新快照。仅 bei-bei.shop HTTP 403 采用已获准的保留旧数据例外。所有验收通过后恢复七个定时器。

v3.9.100

Choose a tag to compare

@BeterXie BeterXie released this 22 Nov 13:12
f175e6e

v3.9.100

修正原商家混合分类导致的商品误归类:Gmail 不再因“社交账号”类目进入社媒目录;CapCut、身份不明的 ID 账号不凭类目猜测。订阅充值卡密不作为礼品卡,使用虚拟卡支付的 MUSE 成品账号不作为虚拟卡,明确标注“非卡”的渠道推荐不作为商品。

订阅充值要求先完成 KYC、或随订阅附带 KYC 时,保留实际订阅身份;独立出售的 KYC 认证服务继续归入验证分类。

无数据库结构、采集 Connector 或抓取行为变更。沿用 v3.9.99 已启动的 665 来源全量采集,完成其标准发布验收后更新同提交 API、Detector、Pipeline、Crawler、五站 Web 与 Oracle Worker。重分类并通过既有库存发布流程生成新快照,保留人工分类和隐藏决定。不重复启动全量 HTTP 抓取。

本次继续部署时间戳 20261122_184720,保留原数据库备份与回滚镜像。用户批准的 bei-bei.shop HTTP 403 单源例外保持原范围,全部发布验收通过后恢复原有定时器。

v3.9.99 — 辅助商品与原始商家持续扫描

Choose a tag to compare

@BeterXie BeterXie released this 22 Nov 11:50

v3.9.99

包含 v3.9.98 的辅助商品修正和 84 家原始商户稳定扫描种子;补充原店铺验证发现的 GitHub 账号附带 Gmail 邮箱误分类防护。邮箱名称作为账号的注册或交付方式时,不改变实际商品。

无数据库结构迁移。继续当前分类接入发布,保留部署时间戳 20261122_184720 的数据库备份和旧版本回滚点;更新所有镜像至同提交,重分类、重扫原店铺并完成完整快照发布后恢复调度。用户已批准的单条 bei-bei.shop HTTP 403 例外不扩大。

v3.9.98 — 修正商品分类并接入原始商家扫描

Choose a tag to compare

@BeterXie BeterXie released this 22 Nov 11:45

v3.9.98

修正新增邮箱分类与 AI 账号标题的边界:Team / Plus / Free 账号附带 Gmail、Outlook 或 iCloud 登录邮箱时,保留 AI 账号归属;RT 老号与 Team 倍率短名正确识别。邮箱服务商否定描述不再形成误分类,Google 手机接码单独归入验证服务。

补充真实公开标题回归,保留人工分类和隐藏决定。无数据库结构迁移;本次继续 v3.9.97 的分类接入部署,保留原数据库备份和回滚点,使用新版本重新分类、发布完整快照并核对五站结果。

根据参考站原始商品来源,登记 84 家商户种子(38 家 LDXP、46 家 16688),并更新生产实际扫描关键词。新增来源仍走现有验证与审批流程,原始商家进入持久定时扫描,不镜像参考站价格库。

v3.9.97 — 邮箱、验证、卡片、社媒与 VPS 分类

Choose a tag to compare

@BeterXie BeterXie released this 22 Nov 10:46

v3.9.97

新增邮箱、接码 / 验证、虚拟卡、礼品卡、社媒账号、Apple ID 和 VPS 分类,支持公开采集、归类、快照、主站及四个品牌站筛选。原 OpenAI、MUSE、JEV 验证商品统一归入验证分类,保持原商品 ID 和历史;现有 X 普通账号继续使用独立分类。

保留现有套餐识别、短名账号识别和人工审核决定,避免描述里的邮箱、卡片和使用场景改变主商品。虚拟卡、礼品卡、VPS 使用各自的交付标签。金额保留商家原始单位,未做面额与服务器配置归一化。

无数据库结构迁移。按 QUICK_DEPLOY.md、MULTI_BRAND_DEPLOY.md 和 COLLECTOR_DEPLOY.md 发布:更新 API、五个 Web、importer、source-detector、主站 crawler 和 Oracle collector;两端保持 COLLECTOR_RELEASE 一致,保留 COLLECTOR_LDXP_ENABLED=false。

上线需重扫 LDXP 来源并完成 Oracle HTTP 来源的完整发布,核对分类和快照一致后恢复调度。历史重分类使用现有入口并保留人工锁定与隐藏状态。详见 docs/AUXILIARY_CATALOG.md。

v3.9.96 — Oracle HTTP collection, local LDXP scans

Choose a tag to compare

@BeterXie BeterXie released this 21 Nov 16:43

v3.9.96

支持分阶段迁移:COLLECTOR_LDXP_ENABLED=false 时,Oracle Worker 只领取已批准的非 LDXP 来源;主站继续通过 refresh_remote.sh ldxp-only 扫描和发布 LDXP,并保留旧浏览器会话与回滚路径。非 LDXP 批次不会启动浏览器扫描。

新增非 LDXP 入队 timer,主站 API 和发布器仍是统一快照与通知权威。待 LDXP 站点验证完成后,再打开开关并迁移浏览器扫描。

v3.9.95 — Dedicated collector gateway network

Choose a tag to compare

@BeterXie BeterXie released this 21 Nov 16:24

v3.9.95

将采集私有网关从 Docker 的 internal 网络移到专用 ai-price-radar_collector_gateway 桥网络。该网络只连接 API 和路由网关,保留宿主机 loopback 18083 的转发;避免 internal 网络不创建端口监听,同时不把网关加入包含数据库的默认网络。

本版本包含 v3.9.94 的网关能力修复和 v3.9.93 的 Oracle 采集迁移。按 docs/QUICK_DEPLOY.md、docs/COLLECTOR_DEPLOY.md 完成构建、迁移和实际采集发布验收。

v3.9.94 — Restricted collector gateway

Choose a tag to compare

@BeterXie BeterXie released this 21 Nov 16:02

v3.9.94

修复独立采集私有网关在非 root、cap_drop ALL 与 no-new-privileges 下无法启动的问题。网关使用仅移除 Caddy 二进制文件能力标记的专用镜像,继续监听容器 8080 与主站 loopback 18083。CI 使用相同的权限限制实际运行网关程序并验证配置。

本版本包含 v3.9.93 的全部独立采集功能及 v28 迁移要求。主站在构建阶段额外运行带 docker-compose.collector-control.yml 的 build collector-gateway;继续按 QUICK_DEPLOY.md 和 COLLECTOR_DEPLOY.md 完成甲骨文切换验收。

v3.9.93 — Oracle collection workers

Choose a tag to compare

@BeterXie BeterXie released this 21 Nov 15:36

v3.9.93

将店铺发现、来源验证、LDXP 浏览器扫描和各平台公开商品采集拆为独立 Worker,主站继续负责审核、数据库、统一快照发布和通知。Worker 不接触生产数据库、后台密钥或机器人凭据。

新增 v28 collector_jobs:持久任务、独占租约、心跳续租、旧回报拒绝、版本匹配与完成状态。甲骨文保留逐来源检查点,回传失败或重启后恢复;主站校验压缩包与来源身份,沿用审批/发布锁后入库。已提交批次恢复导出时不重复推送。

网络通过专用 SSH 反向隧道与仅开放 Worker 路由的私有网关连接,公网内部 API 不开放。采集容器使用独立网桥、非 root、只读根文件系统、能力限制与内网/元数据出站拒绝规则。16688 请求在各采集进程间共用间隔与 15 分钟冷却。

部署必须依次完成 PostgreSQL 16 v28 重复迁移演练、Oracle ARM64 构建、鉴权与网络越界测试、扫描状态迁移、完整回传与主站发布。确认新链路成功后启用新定时调度,旧主站爬虫和 detector 不再运行。详见 docs/COLLECTOR_DEPLOY.md;回滚保留任务表和原采集状态,恢复旧调度。