返回首页 >

全球首个百亿级遥感解译基础模型在济南发布

2024-09-21 16:06   大众新闻

  “空天·灵眸”3.0版内核工作架构是基于热传导,这是联合团队自主研发的一套小而精的原创性架构。受传热学物理思想启发,联合团队将场景目标间视觉语义传播建模为热能扩散过程,从而使该架构有效突破了遥感模型推理的性能和速度瓶颈,计算速度较传统结构模型提升2.4倍以上。

  孙显表示,“目前传统的、用于处理遥感图像的基础模型架构(transformer结构)本质上是基于文本处理架构发展而来,在处理分析图像速度方面存在瓶颈。而‘热传导’的架构,则是吸收了物理的传热学原理。”联合团队将模型运行与热传导作类比,将图像也看作一个温度场,重要的图像区域应该保持较高的温度,用热传导的计算公式来指导和推动模型进行学习。这一架构实现了模型数据学习、推理等速度的大幅提升。例如,原来训练1千万张数据样本,需要大约300多块显卡,现在不仅只需要三分之一的数量,处理速度还能提升约2.4倍。

  “空天·灵眸”3.0版目前已表现出极为优秀的泛化解译性能,在可见光、合成孔径雷达、热红外、多光谱等多传感器卫星数据基础上,拓展至航空遥感飞机、无人机等不同航空平台观测数据的自动化、高精度解译处理。尤其是航空大倾角成像过程中,极易出现畸变、遮挡、缺失等干扰,模型对此依然可以保持高精度的识别能力。

猜你喜欢

热点新闻

{$loop_num=0}