A principios del la Corona de Castilla estableció en este palacio la sede de la Real Audiencia y Chancillería de Valladolid y, junto a ella (años más tarde), se construyó la Cárcel Vieja de Valladolid.