Listo el tokenizador de las palabras que estan en los archivos
Se agrego la funcion para preparar el token y asi poder evaluar los casos donde se ignoran las diferencias entre mayusculas