关于参数高效微调的理论基础,下列描述正确的是:
LoRA 的理论基础是预训练模型的权重更新具有低秩特性,即微调所需的权重变化可以用低维子空间来表示
参数高效微调方法的效果一定远差于全参数微调
低秩分解中的秩(rank)越大,模型效果一定越好
参数高效微调不能应用于大语言模型