Nassau kjellerkapell er under midtskipet i vest. Den måler 7,50 m × 6,60 m. Ti små søyler danner en åttekant og støtter et lite gotisk steinhvelv. I dag kan kapellet bare nås gjennom en liten korridor over den underjordiske inngangen til østkrypten.