La casa fue construida entre 1771 y 1774 para Edward Sheppard, un mercader local, y modificada para los Ricardo según el diseño de George Basevi.