El castillo, al que también se lo conoce como «torre del Pan», se encuentra en la localidad de Arroyomolinos, en la zona oeste de la Comunidad de Madrid.