自蒸馏或 OPD 训练是否需要重要性采样,应怎样判断?

未标记

Sorry o(╥﹏╥)o,暂无参考答案。带这道题,问问AI吧~

问 AI
本题目录

相关面经

1 篇

字节跳动

大模型算法
二面
查看原面经 →
自研自蒸馏训练框架,是否适配重要性采样?说明适配或不适配的原因。
OPD训练框架是否适合引入重要性采样策略?说明理由。

相关题目

4 题