基于多源图像空谱特征融合的环境感知方法
国际学院
Environment sensing method based on multi-source image spatial spectrum feature fusion
高光谱成像是一种通过捕捉电磁光谱中的多个波段来生成图像的技术。与传统RGB图像不同,高光谱图像不仅包含可见光波段的信息,还包括红外、紫外等多个波段的信息,因此可以提供更多的光谱细节。这些细节对于物质成分的识别和分类具有重要作用。
城市环境感知是当前城市管理和规划中的一个关键问题。城市土地覆盖情况复杂,不同类型的地物混杂在一起,增加了对城市环境进行精确感知的难度。现有的遥感图像处理技术在城市环境感知方面存在许多挑战,包括图像分辨率的限制、标签数据的不足、光谱域较窄以及多源数据融合的复杂性。多源遥感图像融合在环境感知方面具有显著优势。通过融合高光谱图像、光学图像、点云数据以及雷达感知信号等,可以充分利用各类图像的互补信息,提高感知精度和数据质量。
基于以上问题,本项目主要使用Toulouse Hyperspectral Data Set,通过MAE(Masked Autoencoders)进行训练和验证,以实现对城市复杂环境的精准感知。