在火星探测任务中,需要构建火星场景下的系列数据集用于相关感知算法的训练以及验证。2021年,围绕语义分割任务中,美国宇航局火星科学实验室发布了第一个名为AI4Mars的大规模火星地形数据集,其中包含四种类型的地形。但由于其中的地形类别定义匮乏,标注精度过低,使得数据集不具有实际的应用价值。为此,本团队针对语义分割任务,发布了一组命名为Mars_seg的系列数据集。
Mars- seg数据集包含丰富的火星场景的高分辨率图像,这有助于研究人员了解真正的火星景观。该数据集的所有单通道灰度图像均来自行星数据系统(PDS),覆盖了机遇号和勇气号火星漫游者(MER)的导航摄像机(NAVCAM)和全景摄像机(PANCAM)拍摄的1064张高清图像;所有的RGB图像是由火星32k收集的,全部来自好奇号漫游者(MSL)的桅杆照相机(MastCam),总共4148幅图像。其中,MER-Seg中的灰度图像的空间分辨率是1024 × 1024,而MSL-Seg中的彩色图像通过双线性插值被降采样到560 × 500。
在本数据集中,通过分析探测车在探测过程中遇到的困难和执行任务过程中可能遇到的高风险问题,我们将数据集中的地形划分为以下9个类别:
Mars_Seg
├─MER │ ├─JPEGImages 原始图像(.jpg) │ └─SegmentationClassPNG 语义分割标签(.png) └─MSL ├─JPEGImages 原始图像(.jpg) └─SegmentationClassPNG 语义分割标签(.png)
本数据集按照图像格式以及数据来源划分为了两组,其中MER数据集中均为1024 ×1024的灰度图像,MSL数据集中均为560×500的RGB图像。
在有监督方法中,可以使用单独的MER或者MSL数据集完成训练、验证和测试;在无监督方法中,可以使用其中的任意一组作为源域数据集,另一组作为目标域数据集进行域适应训练。
我们统计了数据集中包含各个类别的图像数量。
如果您在您的研究中用到了我们的数据集,请记得引用我们的论文。
A Stepwise Domain Adaptive Segmentation Network With Covariate Shift Alleviation for Remote Sensing Imagery ( Volume: 60)
J. Li, S. Zi, R. Song, Y. Li, Y. Hu and Q. Du
Published in IEEE Transactions on Geoscience and Remote Sensing ( Volume: 60)
- Cov-DA: A Stepwise Domain Adaptive Segmentation Network with Covariate shift Alleviation for Remote Sensing Imagery, IEEE Transactions on Geoscience and Remote Sensing, 2022,Jiaojiao Li, Shunyao Zi, Rui Song, Yunsong Li, Yinlin Hu, Qian Du, doi:10.1109/TGRS.2022.3152587. [PDF][Code]
我们提出了一种基于协变量域偏移的逐步域自适应分割网络。具体来说,为了缓解不同传感器采集数据时产生的协变量域偏移,我们设计了一个色彩空间映射统一模块。另外,使用了一个多统计量联合评估模块来捕捉子场景的不同统计特征,用于筛选目标域中高置信度的数据,并通过二次域适应进一步提高分割性能。
@ARTICLE{9716091,
author={Li, Jiaojiao and Zi, Shunyao and Song, Rui and Li, Yunsong and Hu, Yinlin and Du, Qian},
journal={IEEE Transactions on Geoscience and Remote Sensing},
title={A Stepwise Domain Adaptive Segmentation Network With Covariate Shift Alleviation for Remote Sensing Imagery},
year={2022},
volume={60},
number={},
pages={1-15},
doi={10.1109/TGRS.2022.3152587}}
博士生:席博博、武超雄
硕士生:刘佳超、张欢庆、訾顺遥、马寅乐、杜松乘、田鹏昊、刁妍、刘玉哲、陈轩
本科生:张致源、冷奕泓