A pesar de que estuvieron bajo la soberanía de España y Portugal, la permanencia duró poco tiempo, debido a la retirada o cesión a otras potenciales coloniales, como al Imperio alemán, Imperio británico, Imperio francés, Imperio italiano o al Imperio neerlandés.