云原生栅格数据访问的效率提升：Rasterio/GDAL 的替代方案
2024-12-15
随着云存储中地球观测数据的爆炸式增长，高效访问和分析卫星图像成为关键挑战。本文介绍了一种替代 Rasterio/GDAL 的云原生栅格数据访问方法。传统 GeoTIFF 文件读取效率低下，而云优化 GeoTIFF (COG) 通过分块组织和多分辨率访问提高了效率。然而，即使使用 COG，处理时间序列 NDVI 等任务仍然面临延迟问题。为此，作者利用 STAC GeoParquet，结合预先计算的字节范围，减少了 HTTP 请求次数，从而显著提升了数据访问速度。初步测试表明，该方法在处理 Sentinel-2 数据时，显著缩短了获取第一个瓦片的时间，并降低了成本。未来，作者计划开源名为“Rasteret”的库，以实现这些技术。