La casa en la que está ubicado el museo fue donada por Ricardo Duque de Estrada y Tejada, conde de la Vega del Sella y familiar del marqués, reformada en 1774.