Ved Tredje Stampe i byskogen ovenfor Kristiansand sentrum finnes en ca. 5 meter dyp hule som lokalt kalles «Høilandshola», og som kan ha vært blant gjemmestedene Høiland hadde rundt byen. Men allerede i samtiden var han omgitt av mytedannelse og det er vanskelig å fastslå nøyaktig hvor han gjemte seg mens han var på flukt.