我设计了一种多模态分类模型模型分为特征提取和特征融合两个部分其中特征提取部分使用预训练模型进行特征提取对模型参数进行微调特征融合部分使用门控多模态单元从头开始训练。我现在统计模型复杂度和参数量需要去除预训练模型部分么?
是的,如果您要统计该多模态分类模型的复杂度和参数量,应该去除预训练模型的复杂度和参数量。因为预训练模型的复杂度和参数量已经固定,不会因为多模态分类模型的特征提取部分的微调而改变。因此,应该只考虑特征融合部分的复杂度和参数量。
原文地址: https://www.cveoy.top/t/topic/bnV2 著作权归作者所有。请勿转载和采集!