Allerede i 1863 ble det en diskusjon om kirkens vakre, røde teglsteinsmurverket i søyler og vegger. Kirkens første sogneprest Sven Brun mente det ikke var vakkert nok og fikk støtte av arkitekt Georg Bull. I 1870 ble vegger og søyler kalket, til sterke protester fra von Hanno. Ved å kalke veggene ble det veldige kirkerommet unektelig «renere» enn før, men alt i alt var dette en sørgelig forsimpling av Trefoldighetskirken. Det er med rette blitt kalt en «vandalistisk forandring».