El primer marqués que fijaría su residencia familiar en Madrid fue Pedro Rodríguez de Fonseca, al que siguió su hijo Rodrigo de Orellana y Toledo.