En las cercanías del Caballo Blanco hay muchos yacimientos arqueológicos, como el Castillo de Uffington (restos de un fuerte de la Edad de Hierro), o el túmulo prehistórico de Wayland's Smithy, que se encuentra a 2 km en dirección oeste.