Annotating the DELear Learner Corpus: Errors of Grammar, Style, and Inter-Annotator Variability in Annotation Practices
Creators: name: Μαλτέζου, Δανάη Μαρία Θεοφάνη
Publisher: name: Aristotle University of Thessaloniki
Year: 2024
Subjects: Σώμα κειμένων μαθητών
Λάθη στην ξένη γλώσσα
Πρωτοετείς φοιτητές
Learner corpora
Learner errors
First-year students

description: The aim of the present study was to investigate the grammatical and stylistic errors in the DELear learner corpus, which consists mainly of argumentative essays of 1st-year students at the Department of English Language and Literature of the Aristotle University of Thessaloniki. Additionally, the present study employs a holistic analysis by providing insights into the annotation process with three annotators of different L1 backgrounds (Greek, Italian). Using the CatMa software, 285 essays were error-tagged manually, based on a pre-defined annotation schema. Analyses of the most frequent error tags revealed errors of determiner use, noun number, prepositions, and parts of speech, with the overuse and omission of the definite article being the most prominent errors. In the domain of style, errors included complex and lengthy sentences that interfered with the intended meaning, peculiar phrases in the L2, avoidance of idiomatic usage, and the partial negative transfer of L1 expressions in the L2. Lastly, the statistical tests uncovered the negligible effect of the annotators’ L1 in the annotation process, implying that L1 background did not constitute a highly considerable parameter in the quantity of the annotations provided. The results revealed that although first-year students possess adequate grammatical and stylistic competence for argumentative writing, errors of grammar such as accurate determiner use, and preciseness and flexibility in the formation of style follow a non-linear rate of acquisition. As for the annotators’ language background, this seemed to play a role only in the explanation of L1-induced errors through the form of in-text comments, rather than the detection of the errors per se.
description: Ελληνική Περίληψη Σκοπός της διατριβής ήταν να ερευνήσει τα γραμματικά και υφολογικά λάθη στο σώμα κειμένων μαθητών/τριών DELear, το οποίο απαρτίζεται κυρίως από επιχειρηματολογικά δοκίμια πρωτοετών φοιτητών/τριών του τμήματος Αγγλικής Γλώσσας και Φιλολογίας του Αριστοτέλειου Πανεπιστημίου Θεσσαλονίκης. Επιπλέον, η μελέτη αυτή χρησιμοποιεί μια ολιστική προσέγγιση, ερευνώντας τη διαδικασία επισημείωσης από τρεις επισημειώτριες διαφορετικής γλωσσικής προέλευσης (Ελληνικά, Ιταλικά). Χρησιμοποιώντας το λογισμικό CatMa, 285 δοκίμια επισημειώθηκαν χειροκίνητα, βάσει ενός προκαθορισμένου σχήματος επισημείωσης. Οι αναλύσεις των πιο συχνών ετικετών αποκάλυψαν λάθη στη χρήση των προσδιοριστών, των αριθμών των ουσιαστικών, των προθέσεων και των μερών του λόγου, με την υπερβολική χρήση και παράλειψη του οριστικού άρθρου να είναι τα πιο εμφανή σφάλματα. Στον τομέα του ύφους/στυλ, λάθη εντοπίστηκαν στις πολύπλοκες και μακροσκελείς προτάσεις που αλλοίωναν το επιδιωκόμενο νόημα, στις ιδιόμορφες φράσεις στη Γ2, στην αποφυγή χρήσης ιδιωματισμών και στην ήπια αρνητική γλωσσική μεταφορά εκφράσεων της Γ1 στη Γ2. Τέλος, οι στατιστικοί έλεγχοι αποκάλυψαν αμελητέα επίδραση της Γ1 των επισημειωτριών στη διαδικασία επισημείωσης, υπονοώντας ότι η μητρική γλώσσα δεν αποτέλεσε σημαντική παράμετρο στην ποσότητα των παρεχόμενων επισημειώσεων. Τα αποτελέσματα φανέρωσαν ότι παρόλο που οι πρωτοετείς φοιτητές/ήτριες διαθέτουν επαρκή γραμματική και υφολογική/στιλιστική ικανότητα για την επιχειρηματολογική γραφή, τα γραμματικά λάθη όπως η ορθή χρήση των προσδιοριστών, η ακρίβεια και η ευελιξία στη διαμόρφωση του στυλ και του ύφους ακολουθούν έναν μη-γραμμικό ρυθμό απόκτησης. Όσον αφορά στη Γ1 των επισημειωτριών, αυτή φάνηκε να επηρεάζει μόνο την εξήγηση των λαθών που προκαλούνται από την παρέμβαση της μητρικής, μέσω της μορφής σχολίων εντός κειμένου, παρά την ανίχνευση των λαθών.