Situado en el barrio de Quintanilla, fue mandado construir por Felipe IV, y se lo cedió a don Pedro Velasco Bracamonte, que era montero de su guardia, para la custodia de don Juan José de Austria, hijo bastardo habido con María de Calderón "la Calderona".