已关闭
GLM-4.5-AIR模型W8A8量化咨询 #18
mengzichao创建于  1月28日关闭于  1月30日
mengzichao
mengzichao
1月28日 创建

请问msmodelslim支持glm-4.5-air的w8a8量化吗

likedislike
code_mingming成员
1月28日 评论:

您好,暂未适配的模型量化可以参考 https://gitcode.com/Ascend/msmodelslim/blob/master/example/GLM/README.md
或 https://gitcode.com/Ascend/msmodelslim/blob/master/docs/zh/custom_quantization/integrating_models.md 完成模型自主接入。
或者参考昇腾生态专栏中同系列模型的量化实战文章尝试自主量化 https://ascendai.csdn.net/6953b56dbf6b0e4b285f8622.html

likedislike
Ccode_mingming成员
1月28日 修改标题为 “GLM-4.5-AIR模型W8A8量化咨询”,原标题为“量化咨询”
code_mingming成员
1月28日 评论:

/label add resolved

likedislike
ascend-robotascend-robot成员
1月28日 添加了label:resolved
Aanreywmh成员
1月30日 添加了label:transfer-learn/doing
Aanreywmh成员
1月30日 issue状态由 TODO 改变为 DONE
Aanreywmh成员
1月30日 关闭了 issue