Enclavada Torrevelilla en un llano al pie de la sierra de San Marcos, conocida como de La Ginebrosa, cuenta la legendaria tradición oral que fue inicialmente una torre, al parecer agrícola, de un moro llamado Velilla.