Clifford's Tower er et tårn i uvanlig form. Dens struktur er firkanten i planen, ganske like trekløver med fire blader, og besto av to etasjer. En sentral søyle av stein som det nå kun eksisterer rester av, støttet opp den første etasjen. En firkantet tårn på sørsiden mellom to av flikene beskyttet inngangspartiet. Det er defensive småtårn mellom de andre flikene. Selv borgtårnet er antatt å ha vært et eksperiment i forbedre flankeskytingen ved å redusere den døde grunnen som var synlig fra toppen av tårnet. Historikerne antar at byggarbeiderne baserte seg på en fransk modell ettersom man kan finne bortimot identiske eksempler til York ved Étampes i Frankrike. Svært få eksemplarer av denne typen borgtårn eksisterer; et lokalt eksempel er borgtårnet ved Pontefract Castle (i dag meget ødelagt).