Importanța strategică și economică a senioriei atrage imediat atenția musulmanilor, Ramla fiind printre primele vizate în timpul ofensivei lui Saladin, asediul din noiembrie 1177 fiind respins cu greu de forțele creștine. După lupta de la Hattin teritoriul senioriei este anexat de Mameluci iar Cruciada a III-a nu reușește să-l redea creștinilor în ciuda luptelor grele ce se dau în jurul orașului.