Este palacio situado en "Las cuatro calles" perteneció al general de la armada que da nombre al palacio durante el siglo XVII.Según cuenta la tradición, en él se albergaría Isabel la Católica cuando iba de paso a Madrigal de las Altas Torres.