Ανάπτυξη Ελληνικού Συστήματος Απάντησης Ερωτήσεων Ανοιχτού Τύπου
Creators: name: Νάστος, Δημήτριος-Νικήτας Αντωνίου
Publisher: name: Aristotle University of Thessaloniki
Year: 2022
Subjects: Επεξεργασία Φυσικής Γλώσσας
Απάντηση Ερωτήσεων
Ανάκτηση Πληροφορίας
Natural Language Processing
Question Answering
Information Retrieval

description: One of the most important and fastest growing sectors of Computer Science is Artificial Intelligence. One very important and fundamental issue it deals with is Natural Language Processing, which refers to the analysis and understanding of human languages and the ability of interaction between human and "intelligent" systems using these languages. As the volume of information is constantly increasing and people need more and more information, a very important field of research in Natural Language Processing is Question Answering. Since the beginning of the use of computers, the ability to pose questions and receiving answers from them was a fundamental objective. A very important category of question answering systems is the open-domain question answering systems, which are able to answer general knowledge questions based on an external source of knowledge, such as Wikipedia. The development of Transformers and BERT-based models has led to improvements in the performance of Question Answering Systems. Although these models contributed decisively to the development of Question Answering, the fact is that most question answering systems and especially the open-domain ones, work in English, while the number of systems in other languages is very limited. The present diploma thesis attempts to design and develop an open-domain question answering system in Greek. For this purpose, in the absence of the necessary datasets in Greek, machine translation is performed on some of the most suitable question answering datasets from English to Greek. Moreover, a series of models are trained for Question Answering and Information Retrieval, which is a very important part of the open-domain question answering system. Then, the overall system, which is based on the greek Wikipedia, is installed. The system is accessed by the users via a web application that has been designed and developed for this purpose. Finally, the results of the performance evaluation of the system and its components are presented.
description: Ένας από τους σημαντικότερους και ταχύτερα αναπτυσσόμενους τομείς της Επιστήμης των Υπολογιστών και της Πληροφορικής είναι η Τεχνητή Νοημοσύνη. Από τα πλέον βασικά ζητήματα με τα οποία ασχολείται είναι η Επεξεργασία Φυσικής Γλώσσας, δηλαδή η ανάλυση και κατανόηση των φυσικών ανθρώπινων γλωσσών από υπολογιστικά συστήματα και η δυνατότητα αλληλεπίδρασης ανθρώπων και "ευφυιών" συστημάτων με τη χρήση των γλωσσών αυτών. Καθώς το πλήθος των πληροφοριών αυξάνεται συνεχώς και οι άνθρωποι χρειάζονται όλο και περισσότερες πληροφορίες, ένα πολύ σημαντικό πεδίο της έρευνας στον τομέα της Επεξεργασίας Φυσικής Γλώσσας είναι η Απάντηση Ερωτήσεων. Ήδη από την έναρξη της χρήσης των υπολογιστών ήταν βασική στόχευση η δυνατότητα υποβολής ερωτήσεων και λήψης σωστών απαντήσεων από αυτούς. Μια από τις σημαντικότερες κατηγορίες συστημάτων Απάντησης Ερωτήσεων είναι τα Συστήματα Απάντησης Ερωτήσεων Ανοιχτού Τύπου, τα οποία δύνανται να απαντούν σε ερωτήσεις γενικών γνώσεων στηριζόμενα σε μια βασική πηγή γνώσης όπως είναι η Wikipedia. Η ανάπτυξη των μοντέλων Transformers και του BERT έχει οδηγήσει σε βελτιώσεις στην απόδοση των Συστημάτων Απάντησης Ερωτήσεων. Αν και η ύπαρξη αυτών των μοντέλων έχει οδηγήσει σε άνθιση του αντικειμένου της Απάντησης Ερωτήσεων, όπως και άλλων ζητημάτων με τα οποία ασχολείται το πεδίο της Επεξεργασίας Φυσικής Γλώσσας, είναι γεγονός πως τα περισσότερα Συστήματα Απάντησης Ερωτήσεων και ιδιαίτερα τα Ανοικτού-Τύπου, λειτουργούν στην αγγλική γλώσσα, ενώ τα συστήματα σε άλλες γλώσσες είναι ελάχιστα. Η παρούσα εργασία επιχειρεί να δημιουργήσει ένα Συστήματα Απάντησης Ερωτήσεων Ανοιχτού Τύπου στα ελληνικά. Για το σκοπό αυτό, ελλείψει των απαραίτητων δεδομένων εκπαίδευσης στα Ελληνικά, επιχειρείται η μηχανική μετάφραση ορισμένων κατάλληλων datasets, από την αγγλική στην ελληνική γλώσσα. Στη συνέχεια, εκπαιδεύεται μια σειρά μοντέλων τόσο για την Απάντηση Ερωτήσεων όσο και για την Ανάκτηση Πληροφορίας, η οποία αποτελεί βασικό τμήμα κάθε συστήματος απάντησης ερωτήσεων ανοικτού τύπου. Έπειτα, εγκαθίσταται το συνολικό σύστημα, το οποίο στηρίζεται σε δεδομένα της ελληνικής Wikipedia. Η πρόσβαση σε αυτό γίνεται με τη χρήση μιας διαδικτυακής εφαρμογής που αναπτύχθηκε. Τέλος, παρουσιάζονται τα αποτελέσματα της αξιολόγησης της απόδοσης που έγινε τόσο για το συνολικό σύστημα, όσο και για τα επιμέρους τμήματά του.
description: Σε συνεργασία με: Λογιστικής και Χρηματοοικονομικής (Πανεπιστήμιο Μακεδονίας)