来源:期刊VIP网 时间:
作者:李俊丽;马俊宏;
单位:晋中学院信息技术与工程系;
摘要:随着遥感成像技术的发展和普及,高光谱图像中大量的波段使得大多数应用研究遇到休斯现象。而且随着高光谱图像数据量的快速增长,现有的传统串行算法计算复杂度较高,难以处理高维海量高光谱图像数据。针对以上问题,提出Spark平台下基于互信息计算的波段选择算法。利用熵和互信息理论定义波段相关性和多重相关性;基于Spark RDD编程模型设计数据列变换,将数据集划分为列矩阵,以降低计算负载;在Spark平台下对算法并行化,提高算法执行效率。实验结果表明,提出的算法达到了94.5%±0.5的整体分类精度,且加速性能良好,改善了数据可扩展性。
关键词:高光谱图像;;波段选择;;互信息计算;;Spark平台;;并行计算
基金资助:国家自然科学基金(61876122);; 山西省基础研究计划青年科学研究项目(202103021223356);; 山西省高等学校科技创新项目(2021L491)