### ICCV 2023:Parallax-Tolerant Unsupervised Deep Image Stitching #### 概述 本文介绍了一种新的图像拼接方法——Parallax-Tolerant Unsupervised Deep Image Stitching(UDIS++),该方法针对现有的图像拼接技术在处理大视差图像时遇到的问题进行了改进。UDIS++是一种无监督学习方法,能够在无需人工标记的情况下学习到鲁棒性强、适应性好的图像特征,从而实现高质量的图像拼接效果。 #### 背景与挑战 传统的图像拼接技术通常依赖于几何特征(如点、线、边缘等),这些手工设计的特征对于具备足够几何结构的自然场景表现良好。然而,在纹理较少或视差较大的情况下,传统方法的表现就会受到影响。例如,当面对大量视差时,基于学习的方法可能会模糊视差区域;而在低纹理场景下,传统的基于几何特征的方法则可能因缺乏足够的几何特征而失败。 #### 方法论 为了克服上述问题,研究团队提出了UDIS++,一种能够容忍视差变化的无监督深度图像拼接技术。该技术主要分为以下几个步骤: 1. **灵活的图像配准**:UDIS++通过一种从全局同构变换到局部薄板样条运动的鲁棒且灵活的配准方式来建模图像对齐过程。这种配准方法可以为重叠区域提供精确的对齐,并通过联合优化对齐和失真来保持非重叠区域的形状。 2. **增强的迭代策略**:为了提高模型的泛化能力,UDIS++还设计了一个简单但有效的迭代策略来增强配准适应性,尤其是在跨数据集和跨分辨率的应用中。 3. **消除视差伪影**:UDIS++进一步采取措施来消除视差伪影,确保最终的拼接结果既准确又自然。 #### 实验与验证 研究团队利用了UDIS-D数据集中的两个具体案例来验证UDIS++的有效性和优越性: 1. **大视差案例**:在这个案例中,研究人员展示了UDIS++如何有效地处理具有大视差的图像,相比于之前的方法(例如UDIS),UDIS++不仅没有模糊视差区域,而且还保持了高清晰度和连贯性。 2. **低纹理场景案例**:另一个案例则聚焦于低纹理场景下的图像拼接。与传统方法(如LPC)相比,UDIS++能够在缺乏足够几何特征的情况下成功地完成拼接任务,这得益于其强大的自适应学习能力和对复杂场景的理解。 #### 结论与展望 UDIS++作为一种新的图像拼接技术,不仅克服了现有方法在处理大视差和低纹理场景时的局限性,而且还在提高图像拼接质量方面取得了显著的进步。随着未来对这一领域研究的深入,预计UDIS++将在更多实际应用场景中发挥重要作用,如虚拟现实、自动驾驶等领域。此外,UDIS++的成功也为后续的研究提供了有价值的参考方向,即如何结合深度学习技术和传统几何特征提取方法来解决更广泛的实际问题。
2025-03-26 18:28:37 9.18MB 论文
1
滑模结构进行故障检测和容错控制技术,适合了解滑模结构的人员学习使用,英文版资料
2022-11-16 21:51:09 9.18MB smc
1
matlab全景图代码基于鲁棒弹性变形的视差图像拼接代码 图像拼接旨在以最低的计算成本生成高质量的全景图。一种基于鲁棒弹性变形的视差图像拼接方法,可以同时实现精确对齐和高效处理。给定图像之间的一组点匹配,解析变形构造函数以消除视差误差。 然后根据网格图像平面上计算的变形对输入图像进行扭曲。 无缝全景是通过直接重新投影扭曲的图像组成的。 技术:MATLAB、深度学习 完成时间:2017 年 5 月
2022-05-03 14:33:07 11.9MB 系统开源
1
by Thomas Esbensen and Christoffer Slot, Denmark
1
Fault Tolerant Control Design for The Attitude Control Systems of Flexible Spacecraft with Sensor Faults
2021-07-01 15:12:06 257KB 研究论文
1
容错堆栈 问题 基于指针的数据结构容易受到内存故障的影响,这会改变元素之间的链接。 此类故障可能导致数据结构的部分或全部内容丢失。 (想象一个单向链表:被内存故障损坏的单个指针会使列表中的所有以下元素都无法访问。)内存故障很容易观察到(尽管它们通常会导致系统崩溃),并且最近的各种工作都描述了现代 DRAM 对此类故障的敏感性,甚至可以由精心编写的旨在破坏数据的程序引起(例如,[1, 2, 3])。 潜在的解决方案 帮助减少内存故障对基于指针的数据结构的影响的一种方法是简单地复制数据结构的全部内容。 这需要大量的存储开销和额外的操作来保持副本之间的一致状态。 为了避免最多n 个错误,一个数据结构必须被复制n + 1 次。 为了帮助减少帮助容错所需的开销,Aumann 和 Bender [4] 设计了几种容错数据结构。 他们的主要思想是使用较低开销的方法,允许数据结构中最多n 个元素出现故障
2021-06-22 15:04:40 4KB C
1
图像合成中的Error-tolerant分析。
2021-05-21 13:02:18 4.1MB Error-tolerant Compositing
1
ISSC2021_Session_35V_Adaptive Digital Techniques for Variation Tolerant Systems
2021-05-04 14:04:10 3.77MB ISSCC
1
Vehicular communications refer to a wide range of networks proposed for environments characterized by sparse connectivity, frequent network partitioning, intermittent connectivity, long propagation delays, asymmetric data rates, and high error rates. These environments may also be characterized by a
2021-02-09 09:06:58 1.04MB Vehicular networks; Vehicular Ad-Hoc
1
Observer-based adaptive fault-tolerant control of a class of nonlinear systems with actuator failures
2021-02-07 16:03:12 150KB 研究论文
1