Wenn Du sicherstellst, dass im "Elevation" Feld bei den Lade-Optionen nichts drin steht, sollten keine Höhen nachgeladen werden. Ein M lädt die Daten für Caches, bei denen noch keine Höhe bekannt ist nach, ein A lädt die Höhe für alle Caches, egal ob sie schon eine Höhe haben oder nicht.
Alternativ dazu kannst Du Dir auch eine Datei mit allen Höhenangaben, welche auf dem GSAK Server bekannt sind, herunterladen. Dann findet er viele Höhen bereits lokal, und fragt nicht mehr beim Server an. Mehr dazu findest Du unter
https://gsak.net/board/index.php?showtopic=35156&view=findpost&p=268356