På irsk betyr eller innebærer «Caiseal» en form for sirkulært steinfestning og finnes også i stedsnavn andre steder på Irland. hentyder at navnet er avledet fra «Cais-il», det vil si «tributtstein», ettersom stammene i Munster betalte tributt ved Cashels festning. Ifølge legenden reiste Conall Corc, bestefaren til den første kristne konge i Munster, Óengus mac Nad Froích, en festning på toppen av berget og Cashel ble således hovedstaden i Munster. Som i Tara og Armagh hadde det et hoff og ved tiden til sankt Patrick av Irland hevdet Cashel overhøyhet over alle kongelige borger i provinsen da Óengus hersket som konge av Cashel.