El antiguo caserón de los condes de Olocau fue comprado, en 1840, por José Campo Pérez el primer marqués de Campo, quien rehízo la fachada confiriéndole el aspecto actual, y lo amplió con viviendas colindantes, generando una unidad arquitectónica bien definida y articulada en torno al patio, si bien que con extensiones puntuales, como por ejemplo, la Capilla u Oratorio en edificaciones vecinas vinculadas a la misma propiedad utilizando una parte de estos para la capilla del palacio.