Repository navigation
用 Qwen3-0.6B 查看本地权重:张量结构与分布的同屏检查 #1926
sinapsstudio
started this conversation in
Show and tell
Replies: 0 comments
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment
Uh oh!
There was an error while loading. Please reload this page.
Uh oh!
There was an error while loading. Please reload this page.
同一份 Qwen 权重,先看跨层结构,还是先看分布?
图中是在 Sinaps Studio 中查看本地
Qwen_Qwen3-0.6B文件夹:model.safetensors、按层组织的张量结构,以及所选self_attn.q_proj.weight的权重样本。一个小检查流程:
model.safetensors。这张截图展示的是静态权重检查。针对某个具体回答的归因,还需要保存实际输入、运行时 Hook/激活记录以及干预实验结果;这里没有报告这类实验结果。
做 Qwen 诊断时,你更需要跨层张量定位,还是同一输入下的激活对照?
利益相关:Sinaps Studio 开发方。产品为付费 Windows x64 工作区,支持中文界面,提供 30 天 Professional 试用。推理使用自行配置的模型 API 或本地模型服务,算力另计。
https://www.sinapsdata.com.br/zh
All reactions