En høyde kalt Sugar Loaf hadde utsyn over begge fortene, og en stor kanon på den høyden ville gjøre stillingene umulige å forsvare. Dette var et taktisk problem som John Trumbull hadde pekt på tidligere på året da general Gates hadde kommandoen.