El edificio fue encargado en el siglo XVII al escultor Francesc Puig y ampliado un siglo más tarde por el escultor manresano Jaume Padró para ubicar en él las prisiones.