摘要
1.由于特征点的提取和匹配的离散化,提取局部特征的框架很难进行端到端的学习。
2.作者提出了一种基于强化学习的策略梯度的提取局部特征的框架,其通过端到端优化实现了很高的特征匹配度。
3.该简单却强有力的概率模型使得训练和推理更加接近,特征提取更加密集,挑战了“什么是好的关键点”的传统假设。
4.本文提供了在三个公共基准场景下进行图像匹配的先进实验结果。

上图为SIFT和DISK在SFM下的特征提取图(右)和三维重建图(左)。其中,SIFT模型为图像匹配中基础的模型,而SFM算法是一种三维重建算法。可以看到本文提出的模型在三维重建上,纹理的复现更具优越性,在图像特征提取也是更加的密集和完整。
介绍(问题和模型的背景)
1.局部特征是计算机视觉领域很重要的一项技术,自从SIFT模型的诞生,很多应用应运而生,如三维重建,图像实景重定位等。随着深度学习的变革,其他应用多多少少有所提升。但是三维建模由于具有特征稀疏和需手工草稿的性质,成为了该领域应用最后的堡垒。三维建模背后的技术问题是,很难使用可区分的训练目标实现端到端地重建现在主流的一些任务实景。
2.由于计算的复杂性(两张图片每个像素都有可能是可以匹配的关键点),当特征描述

本文提出一种基于强化学习的端到端局部特征提取框架,该框架通过优化特征匹配度来提升图像匹配精度。该方法克服了传统局部特征提取方法中存在的离散化问题,能够实现特征提取与匹配的一体化,提高了匹配的准确性和密集性。

3318

被折叠的 条评论
为什么被折叠?



