La iglesia se sitúa sobre el montículo donde se asentó el castillo de Tardajos siendo probable que la torre sea un resto de la antigua fortaleza.