En 1874, Payer se retiró del ejército debido a ciertas maniobras políticas contra él y sus compañeros oficiales, concernientes a sus descubrimientos y a sus viajes en trineo durante la Expedición austro-húngara al Polo Norte.