模型蒸馏旨在在不影响模型性能的基础上,减模型参数量,减少部署的压力。
类似于用一个更小的模型来学习大模型中的知识点。
介绍
名词解释
teacher -
2021-04-30
模型蒸馏
pre-commit 工具
关于Bert的一切