O Castelo de Newnham foi construído pelos normandos, provavelmente por Fulk de Newenham em meados do século XII durante a guerra civil conhecida como A Anarquia. O castelo estava localizado em uma escarpa ao norte da aldeia e consistia em um motte e design bailey. Ele tinha uma torre de menagem de aproximadamente 6,2 metros por 6,1 metros (20 pés), com paredes de 1,8 metros (5 pés 11 in) de espessura, com cantos curvos incomuns. Uma vez construído, um monte foi empilhado ao redor da torre para produzir o motte, de forma semelhante à vista em Farnham.