元学习论文解读 | Repurposing pretrained models for robust out-of-domain few-shot learning, ICLR2022
MotivationMAML在元训练任务上训练学习模型初始化(也称为checkpoint),根据得到的初始化,在测试任务的支持集上进行几个梯度步骤的任务适应,就可以得到在查询集上的良好预测。然而在实践中,在元训练集上进行re-train或fine-tune可能是行不通的,并且测试任务可能来自不同的分布(cross-domain),所以元测试的优化步长不一定要和元训练一致。Contribution提