大模型量化的基本思路是什么,量化算子如何计算?

未标记

Sorry o(╥﹏╥)o,暂无参考答案。带这道题,问问AI吧~

问 AI
本题目录

相关面经

4 篇

寒武纪

AI 应用开发
秋招一面、二面
查看原面经 →
模型量化是怎么做的

卓驭

HPC高性能计算工程师
校招秋招一面、二面、三面
查看原面经 →
基础与模型优化:多进程 / 线程性能差异,KV Cache、算子融合、量化等

贝壳

RAG 应用开发
查看原面经 →
讲一下量化,具体做什么

美团

AI Infra
校招
查看原面经 →
讲讲大模型的量化,讲量化算子

相关题目

4 题