论文信息
题目: VIDA: Homeostatic Visual Domain Adapter For Continual Test Time Adaptation
VIDA:用于持续测试时间适应的稳态视觉域适配器
作者:Jiaming Liu, Senqiao Yang, Peidong Jia, Renrui Zhang, Ming Lu, Yandong Guo, Wei Xue, Shanghang Zhang
论文创新点
- 设计视觉域适配器:论文提出视觉域适配器(ViDA),通过可训练的高维或低维嵌入空间,全面探索适配器的不同域表示。其中,低秩ViDA专注于任务相关特征表示,忽略动态分布变化的影响,提取域共享知识以减轻灾难性遗忘;高秩ViDA则更关注提取域特定知识,以防止错误积累。
- 提出稳态知识分配策略:为了有效利用低秩和高秩ViDA,提出稳态知识分配(HKA)策略。该策略基于数据分布,通过计算样本的不确定性值