La expansión territorial por el sur tenía como principal tenencia la fortaleza de Albarracín, encomendada a la familia de linaje navarro de los Azagra, que mantuvieron de facto la independencia de Castilla y de Aragón desde 1170, llegando a crear un obispado propio.