title: Ανάπτυξη μεθοδολογίας για την αξιολόγηση εκπαιδευτικών οργανισμών πρωτοβάθμιας εκπαίδευσης
title: Development of a methodology for the evaluation of primary education organizations
Creators: name: Ντερεκα Γεωργια
Publisher: name: Technical University of Crete
Year: 2019

description: Στην παρούσα διατριβή προτείνεται μία μεθοδολογία αξιολόγησης των εκπαιδευτικών οργανισμών Πρωτοβάθμιας εκπαίδευσης (δημόσιων δημοτικών σχολείων) για να γίνει αντιληπτή η ποιότητά τους, να βελτιωθούν οι εκπαιδευτικές τους διαδικασίες και η γενικότερη λειτουργία τους. Για την επίτευξη των σκοπών έρευνας πραγματοποιήθηκε θεωρητική προσέγγιση της έννοιας της ποιότητας στην εκπαίδευση, της Διοίκησης Ολικής Ποιότητας (ΔΟΠ) και της αξιολόγησης στην εκπαίδευση. Εστιάζοντας στο μοντέλο ποιότητας και αριστείας Malcolm Baldrige (MBNQA), επιχειρείται να διερευνηθεί η εφαρμογή του σε εκπαιδευτικούς οργανισμούς της Πρωτοβάθμιας Εκπαίδευσης (δημόσια δημοτικά σχολεία) στην Ελλάδα.
Το MBNQA είναι ένα μοντέλο ποιότητας που εφαρμόζεται ευρέως με επιτυχία σε εκπαιδευτικούς οργανισμούς στις ΗΠΑ και αποτελείται από επτά παράγοντες-κριτήρια:
1.Ηγεσία
2. Στρατηγικός Σχεδιασμός
3 Πληροφορίες και Ανάλυση
4. Ανθρώπινο Δυναμικό
5. Διαχείριση Διαδικασιών
6. Διαμόρφωση Σχέσεων
7. Αποτελέσματα
Χαρακτηριστικό στοιχείο της σημερινής κοινωνίας αποτελεί η αξιολόγηση μέσω της οποίας εξασφαλίζονται έγκαιρα πληροφορίες που οδηγούν σε βέλτιστη απόδοση, επιτυχέστερη αξιοποίηση μέσων και ανθρώπινου δυναμικού, εύκολη λήψη αποφάσεων και μέγιστη παραγωγικότητα. Η διερεύνηση των διεθνών τάσεων, ιδιαίτερα στην Ευρωπαϊκή Ένωση, δείχνει πως εφαρμόζεται η αξιολόγηση στα εκπαιδευτικά συστήματα άλλων χωρών και οδηγεί στο συμπέρασμα ότι η έννοια της αξιολόγησης σχετίζεται όλο και πιο πολύ με την έννοια της ποιότητας στην εκπαίδευση.
Για να γίνει η παρούσα έρευνα, λοιπόν, χρησιμοποιήθηκε ως εργαλείο το ερωτηματολόγιο. Βάση αποτέλεσε το ερωτηματολόγιο του μοντέλου Malcolm Baldrige, το οποίο δεν χρησιμοποιήθηκε στην αρχική του μορφή. Χρειάστηκε αρκετός χρόνος για να μεταφραστεί στην ελληνική γλώσσα, να τροποποιηθεί ώστε να προσαρμοστεί στα ελληνικά δεδομένα της Πρωτοβάθμιας εκπαίδευσης, να δοθούν αρχικές γενικές οδηγίες συμπλήρωσης, καθώς και να σημειωθούν σχόλια που αντιστοιχούν σε κάθε ποσοστό (επεξήγηση ποσοστών) για καθέναν από τους επτά παράγοντες του μοντέλου Malcolm Baldrige. Κάθε παράγοντας απαρτίζεται από ερωτήσεις, ορισμένες από τις οποίες αφαιρέθηκαν, κατόπιν πιλοτικής εφαρμογής-προελέγχου που πραγματοποιήθηκε πριν την οριστική έκδοση και τελική διανομή του ερωτηματολογίου από την ερευνήτρια.
Το σωστό θα ήταν για το MBNQA να εφαρμοστεί σε σχολικές μονάδες για αρκετό χρονικό διάστημα και να συμμετάσχουν όλες οι ομάδες που σχετίζονται με την εκπαιδευτική διαδικασία, όπως η διεύθυνση του σχολείου, οι εκπαιδευτικοί, οι μαθητές, οι γονείς των μαθητών, οι προμηθευτές, να συγκεντρωθούν οι απόψεις τους για την εκάστοτε σχολική μονάδα, ώστε να διερευνηθεί η λειτουργία της από όλες τις σκοπιές συγκεντρώνοντας στοιχεία π.χ. οικονομικά, δράσεις του σχολείου κλπ., για  να είναι έτσι περισσότερο αντικειμενική η αυτο-αξιολόγηση του σχολείου. Η ερευνήτρια της παρούσας έρευνας επέλεξε να ασχοληθεί μόνο με τους διευθυντές και τους δασκάλους (μόνιμους και αναπληρωτές) δημόσιων δημοτικών σχολείων, καθώς θεωρεί πως είναι οι δύο βασικές ομάδες που γνωρίζουν καλύτερα τη σχολική μονάδα στην οποία εργάζονται όπως και τα δεδομένα της εκπαίδευσης τα οποία μεταβάλλονται διαρκώς.
Αξίζει να σημειωθεί ότι αντικείμενο μελέτης της παρούσας έρευνας είναι και ο τύπος των σχολικών μονάδων (αστικά, αγροτικά, νησιωτικά) για να γίνει σύγκρισή τους και να διαπιστωθεί η ποιότητα των σχολείων (δυνατά και αδύνατα σημεία τους σύμφωνα με την εμπειρία των διευθυντών και των δασκάλων) σε κάθε μεριά της χώρας μας, όπου οι γεωγραφικές συνθήκες είναι λιγότερο ή περισσότερο δύσκολες.
Το δείγμα ήταν μία επιδιωκόμενη επιλογή δημοτικών σχολείων (δάσκαλοι και διευθυντές), ώστε η παρούσα έρευνα να προχωρήσει και σε επίπεδο σχολικής μονάδας. Συγκεκριμένα συγκεντρώθηκαν ερωτηματολόγια δασκάλων και διευθυντών των νομών Λάρισας, Καρδίτσας, Χανίων, Αττικής, Πιερίας, Βοιωτίας, Εύβοιας, Κυκλάδων και Δωδεκανήσου, οι οποίοι απάντησαν στις ερωτήσεις των επτά κατηγοριών του ερωτηματολογίου ανάλογα με την εμπειρία τους και πραγματοποιώντας αυτο-αξιολόγηση του σχολείου στο οποίο εργάζονται. Ακόμη, χρησιμοποιήθηκε η πολυκριτήρια μέθοδος ανάλυσης αποφάσεων PROMETHEE. Έτσι, φάνηκαν τυχόν αδυναμίες ή δυνατά σημεία κάποιων σχολικών μονάδων.
Ιδιαίτερο ενδιαφέρον έχουν τα αποτελέσματα της παρούσας έρευνας ως προς την αξιολόγηση των δημοτικών σχολείων και κατ' επέκταση ως προς την κατεύθυνση προώθησης της ποιότητας στην εκπαίδευση, λόγω των συμπερασμάτων στα οποία οδήγησαν, κατόπιν συγκρίσεων των απόψεων των διευθυντών με τις απόψεις των εκπαιδευτικών (δασκάλων), των μόνιμων δασκάλων με των αναπληρωτών, καθώς και των συγκρίσεων σχολικών μονάδων ανά περιοχή (αστικά, αγροτικά, νησιωτικά δημοτικά σχολεία).
Με βάση, λοιπόν, τις τρεις βασικές αρχές της ΔΟΠ στον τομέα της εκπαίδευσης (Ζαβλανός, 1998): 1) Η εστίαση στις ανάγκες της κοινωνίας, 2) Η διαρκής βελτίωση των εκπαιδευτικών διαδικασιών και υπηρεσιών, 3) Η ενεργός συμμετοχή από το ανθρώπινο δυναμικό στο σύνολό του, το μοντέλο Malcolm Baldrige για να μπορέσει να εφαρμοστεί ως μεθοδολογία αξιολόγησης (αυτο-αξιολόγησης) στα δημόσια δημοτικά σχολεία χρειάζεται τη διαμόρφωση ενός συγκεκριμένου πλαισίου μέσα στη σχολική μονάδα, το οποίο παρουσιάζεται στα πλαίσια της διατριβής, ώστε όλοι οι συμμετέχοντες να ενστερνίζονται προκαταβολικά μία φιλοσοφία ολικής ποιότητας.
Καταλήγουμε, λοιπόν, ότι το μοντέλο αξιολόγησης Malcolm Baldrige μπορεί να αποτελέσει πρόταση εφαρμογής για την αυτο-αξιολόγηση εκπαιδευτικών οργανισμών Πρωτοβάθμιας Εκπαίδευσης (δημόσια δημοτικά σχολεία) στην Ελλάδα για να γνωρίζουν τα σχολεία τα δυνατά και αδύνατα σημεία τους, τις σχέσεις μεταξύ των παραγόντων-κατηγοριών, να καταβάλουν προσπάθειες να αντιμετωπίζουν, να επιλύουν και να βελτιώνουν τα όποια αρνητικά στοιχεία και να διατηρούν τα θετικά στοιχεία τους με στόχο να λειτουργούν εύρυθμα. Αξίζει να σημειωθεί ότι το μοντέλο Malcolm Baldrige μπορεί να εφαρμοστεί στα δημοτικά ελληνικά σχολεία με ανάλογες προσαρμογές, ανάλογα, δηλαδή, με τα δεδομένα, τις ανάγκες και τις απαιτήσεις του κάθε δημοτικού σχολείου. Άλλωστε, οποιοδήποτε σχέδιο εφαρμογής οποιουδήποτε μοντέλου ποιότητας σε εκπαιδευτικό πλαίσιο πρέπει να προσαρμόζεται στο ιδιαίτερο περιβάλλον του εκάστοτε συστήματος.
description: The main purpose of the present thesis is to explore the intention of Primary Education actors (directors and teachers of primary schools) toward the application of evaluation methodology in Primary Education Organizations (public primary schools). Research endeavor proceeds through reviewing the literature and investigating the quality criteria of the Malcolm Baldrige model. Research reported herein proposes an assessment method for school units in order to improve educational processes and its operation in general. A review of the existing literature is presented, as well as a research analysis.
Nowadays evaluation is main characteristic that provides information in time that leads to optimal performance, better use of resources and potential, easy decision-making and maximum productivity.
Exploring international trends, particularly in the European Union, leads to the conclusion that evaluation is increasingly linked to the quality and improvement of education. More than that, Total Quality Management (or TQM in short) concepts, methods and techniques have been applied to the management of educational organizations.
This present thesis adopts TQM toward evaluation in education, focuses on quality and excellence model Malcolm Baldrige, attempts to investigate its application to primary education schools in Greece and proposes an evaluation methodology. It also seeks to contribute to the promotion and improvement of educational processes, ending up with conclusions on the current situation (in year 2019) in primary schools and proposing a new method of self-evaluation.
Due to the fact that evaluation starts from the United States, an American model of quality that is widely applied in US educational institutions, the Malcolm Baldrige Nation Quality Award (or MBNQA model in short), is selected in the present study. The questionnaire was used as a tool for this research. The basis was the Malcolm Baldrige questionnaire, which was also applied by Meyer & Collier (2001) in the field of health. The originality of the present investigation also lies in the fact that this questionnaire was implemented in a limited form (teachers and primary school principals only). It took a good deal of time to translate into the Greek language, to be modified to adapt to the Greek data of primary education (e.g. replacing the terms "senior leadership", "worker" and using the educational terms "director", "teacher"
23
"student", "educational processes", "teaching methods", etc.), and then the translated Greek questionnaire to be re-translated into the language of the original foreign language questionnaire in order to check the semantic equivalence and to find any discrepancies. It also took time to give initial general instructions for completion, as well as give comments corresponding to each percentage (explanation of percentages) for each factor (Leadership, Strategic Planning, Information and Analysis, Human Resources, Operations Management, Configuration Relations Results) to help respondents in their responses about the Greek public primary schools. It was decided to use a Likert five-step scale where 1 = 100% -80%, 2 = 80% -60%, 3 = 60% -40%, 4 = 40% -20%, 5 = 20% -0% where 1 is the most positive and 5 is the worst. The scale in this form was chosen to be surer of the answers, that the sample read the questions as most surveys use the 5-point Likert scale but where 1 is the most negative and 5 the most positive. Of course, the scale of the present study may make future researchers difficult to use it because it is commonly used as the inverse of prices. Each factor is composed of questions (some of which were removed - Confirmatory Factor Analysis - based on each factor based on negative behavior in the model or improvement of model acceptance ratios) after a pilot-pre-trial research before final release and final distribution of the questionnaire by the researcher in a sample of 20 academics, as well as teachers and managers, to understand the questionnaire and ensure its quality. In Annex I - Questionnaire, the questions that remain and were used in the survey are highlighted in bold.
The complete form of the MBNQA is to be applied to schools for a long time and to involve all groups related to the educational process, such as directors, teachers, students, students' parents, suppliers, to gather their views on the school unit in order to explore its function from all points of view and gathering data, for example, school activities, etc., so that the self-evaluation of the school is more objective. The investigator of this research chose to deal only with the directors and teachers (deputies and permanent) of public primary schools. She considers these groups to be the school's core for self-evaluation, as they are the two main groups (director and teacher's team) who are best aware of the school unit in which they work, as well as the training data which change constantly. It is worth noting that the study of this research is also the type of school units (urban, rural and island) in order to compare them and to establish the quality of the schools (their strengths and
24
weaknesses according to directors' and teachers' experience) in every part of our country, where geographic conditions are more or less difficult.
The sample was an intended choice of primary schools (teachers and directors), so that the present research goes even at school level. Specifically, 264 questionnaires were gathered by teachers and managers of 20 primary schools in total (prefecture of Larissa, prefecture of Karditsa, prefecture of Chania, prefecture of Attiki, prefecture of Pieria, prefecture of Viotia, prefecture of Evia, prefecture of Cyclades and prefecture of Dodekanissos) who responded to the suggestions / questions of the seven Malcolm Baldrige questionnaire criteria (Leadership, Information and Analysis, Strategic Planning, Managing Process, Human Resources, Relationship, Outcomes-Performance) depending on their experience by performing self-evaluation of the school unit in which they work.
In addition, the PROMETHEE Multiple Criteria Analysis Method was used in order to identify weaknesses or strengths of some school units, with pre-selected weights for each criterion.
The results of this research are of particular interest in the evaluation of primary schools and, by extension, in the direction of promoting quality in education, because of the conclusions they led, following comparisons between the directors' and the teachers' views, permanent teachers with alternates, and school district comparisons by region (urban, rural, island primary schools). Indicatively, the following are mentioned:
- 100% of the sample stated affirmatively that they have participated in training sessions.
- About the evaluation, it is stated that 84,1% of the total sample is positive in the existence of School Data for the contribution of teachers to the development of their students. On the other hand, it is mentioned that rates are lower for self-assessment. 66,7% of the sample was positive in self-evaluation, with more positive (74,3%) rural primary school teachers.
With regard to Leadership, Information and Analysis, Strategic Planning, Management Process, Human Resources, Relationship Development, Outcomes-Performance:
- Women had more negative opinions than men on all factors.
- The younger ones had more negative opinions than the older ones on all factors.
25
- Substitutes had more negative views than those who are permanent on all factors.
- The fewer experienced (younger) had more negative views than the more experienced (older) on all factors.
- The directors had more positive views than the teachers on the operation of their school units.
-At the end of the questionnaire, respondents were asked to rate the three strongest factors in their school and the three weakest.
a) The strengths of teachers:
Information and Results were the first strongest factor in Urban schools. In Rural schools were Information and in Island schools were Outcomes, Information and Relationships.
Taking into account all three factors that were possible, overall stronger factors in Urban schools were Process Management, Relationships, Information and Strategic Planning. In the Rural schools was Information and in the Island schools were Results and Leadership.
The weakest points of teachers:
The first weakest factor in all three types of schools was Leadership and Information. In Urban schools, were Human Resources, too. Overall the weakest factors in Urban schools were Human Resources, Strategic Planning, Information, Process Management and Results. In Rural schools were Relationships and Results. In the Island schools were Strategic Planning and Information.
b) The strengths of the Directors:
As the first strongest factor in Urban and Island schools were Process Management and Leadership. In Rural schools was Leadership. Overall the strongest factors in the Urban schools were Human Resources and Outcomes. At Rural schools were Strategic Planning, Management and Leadership. In the Island schools were Leadership, Relationships and Results.
The weakest factors of Directors:
As the first weakest factor in all school types was Information. In Urban and Island schools there were also Relationships and Results. Overall the weakest factors for the Urban schools were Strategic Planning and Human Resources. In the Rural schools were Information, Results and Relationships. In the Island schools were Process Management, Human Resources and Results.
26
- All factor relationships are positive.
- Primary schools in island regions have more deficiencies and problems.
Based on the three basic principles of the TQM in the field of education: 1) Focus on society's needs, 2) Continuous improvement of educational processes and services, 3) Active participation by the human resources as a whole, the Malcolm Baldrige model in order to be able to be applied as a self-assessment methodology in public primary schools needs to form a specific framework within the school unit, which is proposed in this research.
We conclude, therefore, that the Malcolm Baldrige rating model, applied to businesses, health structures and USA educational institutions, is difficult to imlement but may be a proposal to apply for self-evaluation of primary education institutions (public primary schools) in Greece, to know the school's strengths and weaknesses, the relationships between the factors, to make efforts to solve any negative elements and to maintain their positive elements in order to function properly their operation. The Malcolm Baldrige model can be applied to primary schools in Greece with appropriate adaptations (depending on the data of each primary school). Besides, any implementation plan of any quality model in an educational context should be adapted to the system's particular environment.