内容概要：本文档详细介绍了基于Swin Transformer架构的深度学习模型——SwinUNet的实现。该模型采用了改进的Global-Local Spatial Attention（GLSA）机制，结合了全局上下文理解和局部细节捕捉能力，提升了模型对图像特征的理解。文档具体描述了GLSA模块、窗口化多头自注意力机制（Window-based Multi-head Self-Attention）、Swin Transformer块、补丁嵌入（Patch Embedding）、下采样与上采样层等关键组件的设计与实现。此外，还展示了模型的前向传播流程，包括编码器、瓶颈层和解码器的具体操作。 适合人群：具备一定深度学习基础，特别是熟悉PyTorch框架和Transformer架构的研发人员。 使用场景及目标：①适用于医学影像、遥感图像等需要高精度分割任务的场景；②通过改进的GLSA机制，提升模型对全局和局部特征的捕捉能力，从而提高分割精度；③利用Swin Transformer的层次化结构，有效处理大规模图像数据。 阅读建议：此资源不仅包含代码实现，还涉及大量理论知识和数学推导，因此建议读者在学习过程中结合相关文献深入理解每个模块的功能和原理，并通过调试代码加深对模型架构的认识。

3D注意事项 Sanghyun Woo, et al. "CBAM: Convolutional Block Attention Module." arXiv preprint arXiv:1807.06521v2 (2018). 代码： class channel_attention ( tf . keras . layers . Layer ): """ channel attention module Contains the implementation of Convolutional Block Attention Module(CBAM) block. As described in https://arxiv.org/abs/1807.06521. """ def __init__ ( self , rati