Nižší z obou věží se také nazývá Juditina věž, protože byla součástí Juditina mostu, předchůdce dnešního mostu Karlova. Byla zbudována z kvádříkového zdiva v románském slohu v druhé polovině dvanáctého století. Ve třináctém století zde byla brána a druhá, menší severní věž, nahrazené v souvislosti s budováním nového Karlova mostu dnešními gotickými stavbami.