Effizienter Cloud-nativer Zugriff auf Rasterdaten: Eine Alternative zu Rasterio/GDAL
Das exponentielle Wachstum von Erdbeobachtungsdaten im Cloud-Speicher erfordert einen effizienten Zugriff und eine effiziente Analyse von Satellitenbildern. Dieser Artikel stellt einen alternativen Ansatz für den cloud-nativen Zugriff auf Rasterdaten als Alternative zu Rasterio/GDAL vor. Traditionelle GeoTIFFs sind ineffizient, während Cloud-optimierte GeoTIFFs (COGs) die Effizienz durch Kachelung und Multi-Resolution-Zugriff verbessern. Auch mit COGs leiden Aufgaben wie die Zeitreihenanalyse von NDVI jedoch unter Latenz. Die Autoren nutzen STAC GeoParquet, kombiniert mit vorkalkulierten Byte-Bereichen, um HTTP-Anfragen zu reduzieren und so den Datenzugriff deutlich zu beschleunigen. Erste Tests zeigen, dass dieser Ansatz die Zeit bis zum ersten Kachel deutlich verkürzt und die Kosten senkt. Eine zukünftige Open-Source-Bibliothek, "Rasteret", wird diese Techniken implementieren.
Mehr lesen