Turun palossa vuonna 1827 pankin toimitalo tuhoutui, mutta arvopaperit ja kassa saatiin pelastettua. 1830-luvulla pankin toiminta kohtasi vaikeuksia, kuten koko muukin Turun talouselämä palon jälkeisen jälleenrakennuksen ja yliopiston Helsinkiin muuton takia. 1840-luvulla toiminta piristyi, kun pankin isännät olivat päättäneet avata talletusoikeuden kaikille säädyille. 1860-luvun lopun suuret nälkävuodet olivat taas vaikeita. Sen jälkeen pankin toiminta alkoi kasvaa Suomen uuden oman valuutan markan ja yleisen noususuhdanteen ansiosta niin, että pankille tuli jopa ongelmia rahojen sijoittamisessa. Pankin isännät päättivät rakennuttaa oman toimitalon, vuonna 1891 valmistuneen Sebastian Gripenbergin piirtämän pankkipalatsin Linnankadun varteen, jossa Turun Säästöpankki piti pääkonttoriaan aina vuoteen 1992 saakka. Vielä läpi 1920-luvun ajan pankin henkilökuntaan kuului vain 13 henkilöä: toimitusjohtaja, asiamies, kamreeri, ensimmäinen kassanhoitaja, toinen kassanhoitaja, seitsemän virkailijaa ja vahtimestari.