Steder av interesse i byen inkluderer hageanlegget Ellon Castle Gardens, nylig brakt tilbake til livet av frivillige og åpent for publikum. Det omfatter en inngjerdet hage av historisk betydning, barlind som dateres tilbake 500 år og ruinene av det gamle Ellon Castle, som opprinnelig var en borg av tømmer på en høyde på 1200-tallet, eid av adelsfamilien Comyn. De eneste ruiner som har blitt bevart er fra en struktur som ble bygget på 1500-tallet, som kan ha bygd seksjoner fra 1400-tallet, men hele byggverket er preget av renovasjoner fra 1700-tallet. De omkringliggende murene er kjent som . Ellon har også , bro over Ythan registrert i kategori A, bygget i 1793 og fortsatt i bruk som fotgjengerbro.