SAM模型加速变体EdgeSAM 比原始SAM提速40倍
EdgeSAM是一个优化过的SAM变体,相比原始SAM实现了40倍的速度提升,对性能的影响较小,可以在iPhone14上以30帧每秒的速度运行。该方法将原始的基于ViT的SAM图像编码器提炼成纯CNN架构,更适合边缘设备。引入了一种动态提示采样策略,旨在实现三个关键目标:从初始提示动态生成多样化的提示组合,准确识别学生模型在掩模内表现不准确的区域,从引导其专注于这些特定的部分,并促使教师模型,即SAM,产生更高质量的掩模,以提供更精确的指导。