Repository navigation
v0.62.7 — 词法准入只认内容词
0.62.7 — 词法准入只认内容词(2026-11-14)
- 问题(实测):
hasStrongHit把任何 ≥2 字词面重叠都当「强命中」,于是功能词
(怎么/什么/多少/为什么/怎么办…)单独就能把无关记忆捞出来:怎么办→ 返回 3 条无关记忆;怎么减肥→ 命中「沟通偏好」,因为那条正文里有「怎么输出」。
词法分实测 0.357 > 短查询门槛 0.05,纯靠阈值压不住(0.25 的 REAL_HIT_FLOOR 也拦不住)。
- 修复:新增
isGenericCjkToken()/hasContentHit()。词法通道(含词法保底)
要求命中至少一个 ≥2 字的非功能词(内容词)才准入;只有功能词重叠直接拒绝。
语义相关仍由向量通道负责,不影响真正的语义检索。 - 新增回归用例 4 例:功能词判定 / 内容词命中判定 / 通用词查询不再命中 / 实义词查询不误伤。
测试:1114 例 / 1113 pass / 1 skip / 0 fail。