Skip to content

v0.1.3-looma21

Choose a tag to compare

@gihpee gihpee released this 28 Sep 19:10
· 4 commits to looma/bf16-experts since this release

GLM-4.5-Air-FP8: fp8-эксперты с масштабом на строку (Fp8ChannelMoEMethod, режим per_row_scale у block-fp8 GEMM); читалка GLM-4 различает fp8 и NVFP4 в плотных слоях и деквантует fp8-внимание до DF11.