En el siglo X ya se encuentra geográficamente consignada como "Qalyusa", y posteriormente con las castellanizaciones “Caloixa”, “Caloxa” o “Caloja”, por lo que probablemente el término deriva del árabe القلعة ("al-qal‘a", el castillo) y "lawša" (roca).