[en] In this thesis, we propose different contributions with the goal of enhancing and recognizing historical handwritten document images, especially the ones with rare scripts, such as cipher documents. In the first part, some effective end-to-end models for Document Image Enhancement (DIE) using deep learning models were presented. First, Generative Adversarial Networks (cGAN) for different tasks (document clean-up, binarization, deblurring, and watermark removal) were explored. Next, we further improve the results by recovering the degraded document images into a clean and readable form by integrating a text recognizer into the cGAN model to promote the generated document image to be more readable. Afterwards, we present a new encoder-decoder architecture based on vision transformers to enhance both machine-printed and handwritten document images, in an end-to-end fashion. The second part of the thesis addresses Handwritten Text Recognition (HTR) in low resource scenarios, i.e. when only few labeled training data is available. We propose novel methods for recognizing ciphers with rare scripts. First, a few-shot object detection based method was proposed. Then, we incorporate a progressive learning strategy that automatically assigns pseudo-labels to a set of unlabeled data to reduce the human labor of annotating few pages while maintaining the good performance of the model. Secondly, a data generation technique based on Bayesian Program Learning (BPL) is proposed to overcome the lack of data in such rare scripts. Thirdly, we propose a Text-Degradation Invariant Auto Encoder (Text-DIAE). This latter self-supervised model is designed to tackle two tasks, text recognition and document image enhancement. The proposed model does not exhibit limitations of previous state-of-the-art methods based on contrastive losses, while at the same time, it requires substantially fewer data samples to converge. In the third part of the thesis we analyze, from the user perspective, the usage of HTR systems in low resource scenarios. This contrasts with the usual research on HTR, which often focuses on technical aspects only and rarely devotes efforts on implementing software tools for scholars in Humanities.

[es] En esta tesis proponemos diferentes contribuciones con el objetivo de mejorar y reconocer imágenes de documentos manuscritos históricos, especialmente aquellos con escrituras raras, como los documentos cifrados. En la primera parte, se presentan algunos modelos efectivos de extremo a extremo para la mejora de imágenes de documentos utilizando modelos de aprendizaje profundo. En primer lugar, se exploran las redes adversarias generativas (cGAN) para diferentes tareas (limpieza de documentos, binarización, desenfoque y eliminación de marcas de agua). A continuación, mejoramos los resultados recuperando las imágenes de documentos degradados en un formato legible mediante la integración de un reconocedor de texto en el modelo cGAN. Posteriormente, presentamos una nueva arquitectura de codificador-decodificador basada en transformers para mejorar las imágenes de documentos impresos y escritos a mano, de manera integral. La segunda parte de la tesis aborda el reconocimiento de texto escrito a mano (HTR) en escenarios de bajos recursos, es decir, cuando solo hay disponibles pocos datos etiquetados de entrenamiento. Proponemos métodos novedosos para reconocer cifrados con alfabetos raros. En primer lugar, se propone un método basado en métodos de pocos datos (few-shot) para detección de objetos. Luego, incorporamos una estrategia de aprendizaje progresivo que asigna automáticamente pseudoetiquetas a un conjunto de datos sin etiquetar para reducir el trabajo humano de anotar algunas páginas mientras se mantiene el buen rendimiento del modelo. En segundo lugar, se propone una técnica de generación de datos basada en el aprendizaje de programas bayesianos (BPL) para superar la falta de datos en alfabetos raros. En tercer lugar, proponemos un autoencoder invariable a la degradación de texto. Este último modelo autosupervisado está diseñado para abordar dos tareas, el reconocimiento de texto y la mejora de la imagen del documento. El modelo propuesto no presenta limitaciones de los métodos anteriores basados en contrastive losses, mientras que al mismo tiempo requiere sustancialmente menos muestras de datos para converger. En la tercera parte de la tesis analizamos, desde la perspectiva del usuario, el uso de sistemas HTR en escenarios de bajos recursos. Esto contrasta con la investigación habitual sobre HTR, que a menudo se centra solo en aspectos técnicos y rara vez dedica esfuerzos a implementar herramientas de software para académicos en Humanidades.