Etter en spesielt opprivende krangel med kona, skal han ha seilt alene til Bergen midt i en storm, i ei jekt som ordinært krevde et mannskap på fire mann. Ifølge historien forlot han jekta etter å ha rent den inn i et pakkhus på Nordnes. Deretter gikk han Strandgaten mot Vågen med en dør på hodet, mens han oppførte seg svært høylytt og angrep folk. Han ble satt midlertidig i sinnssykehus, men slapp ut etter å ha ramponert rommet sitt og banket opp flere av pleierne. Etter dette vendte han aldri mer hjem til Sveen. Han vandret hvileløst omkring på Vestlandet, utelukkende til fots, og truet til seg penger og alkohol fra folk. Han oppsøkte også markeder hvor han demonstrerte sine kjempekrefter mot betaling. Storevik døde i Salhus utenfor Bergen i 1863, visstnok etter en våkenatt med iherdig bibellesing.