En 1654, sin embargo, van Campen abandonó el proyecto tras una disputa con los alcaldes de Ámsterdam, probablemente en relación con el diseño de las bóvedas., y regresó a Randenbroek.