El palacio constaba de un edificio rectangular con dos patios, con una fachada principal a la calle, llamada en aquella época calle del Duque de Osuna, no la actual calle Duque de Osuna que está entre la calle Princesa y la calle de San Bernardo.