Tarifa pasará en los siglos siguientes a depender primero del Reino Taifa de Algeciras en 1031 para más tarde hacerlo del de Sevilla en 1057.