title: The prediction of student satisfaction with online-self-assessments
title: Zur prädiktiven Validität von Self-Assessments für die Studienzufriedenheit
Creators: name: Hasenberg, Svea
Publisher: name: Philipps-Universität Marburg
Year: 2013
Subjects: Online-self-assessment
Validität
Studienzufriedenheit , Prognosevalidität
Psychologie
Student satisfaction
Zufriedenheit
Prospective validity
Online-Self-Assessment

description: Internet-based self-assessments
      are currently enjoying increasing acceptance in Germany's
      higher education system. They are intended to enable
      prospective students to assess their individual suitability
      for a course of study more profoundly, contribute to their
      orientation and decision-finding, and thus increase the fit
      between student and major subject. Via this mechanism
      self-assessments are assumed to have a positive impact on
      various criteria of academic success. Several studies on the
      validity of self-assessment criteria have already
      demonstrated a rela-tionship between an individual's
      performance in the self-assessment – measured prior to or
      shortly after beginning studies – and the examination results
      he or she later achieves (e.g. Hartweg, 2010; Zimmerhofer,
      2008). For subjective criteria of academic success, such as
      the satisfaction with the course of studies, however, there
      are hardly any empirical results, in addition to a lack of
      longitudinal studies. Thus, the main objective of the present
      thesis is to investigate the predictive validity of
      internet-based self-assessments for students' satisfaction
      with their studies in a longitudinal design. For this purpose
      the extent to which test scores can predict satisfaction in
      the later course of the study will be analyzed. The research
      project was conducted in the course of three papers based on
      the Marburg Self-Assessments for Biology and Economics and by
      means of regression analysis. The first paper presents the
      psychometric analysis and initial validation of a newly
      developed instrument for students' organizational skills. The
      second paper examines the predictive validity of various
      cognitive and non-cognitive self-assessment components and
      tests comparatively which self-assessment components can
      predict examination results and satisfaction with the course
      of study. The third paper focuses on the analysis of
      predictive validity of study expectations, measured by means
      of a specially designed questionnaire for the satisfaction
      with the course of study. The results of the first paper show
      significant correlations between the scales for students'
      organizational skills and satisfaction with the course of
      study in the first semester (N = 205 students of Biology and
      Economics). The results of the second paper, which are based
      on the self-assessment for Economics (N = 102), demonstrate
      incremental validity of several self-assessment components
      beyond the score of the university entrance examination.
      While cog-nitive skills correlate with the average grades in
      the second semester, prior knowledge and non-cognitive
      variables prove to be relevant predictors for the
      satisfaction with the major course of study. In the third
      paper (N = 85 Biology students) the dimension of general
      sci-ence – i.e., the correct assumption that one will deal
      not only with biology but also with mathematics, chemistry
      and physics in the course of studies – contributes
      significantly to the prediction of satisfaction with the
      course of study. In summary, the present thesis is able to
      provide significant evidence concerning the validity of
      self-assessments for students' satisfaction with their
      courses of study. For optimal predic-tion of objective and
      subjective academic success criteria through self-assessments
      beyond the score of the university entrance examination, a
      combination of skill-based, knowledge-based and
      personality-related predictors should be assessed.
      Furthermore, universities should offer to assess prospective
      students' organizational skills and align their expectations
      with critical aspects of the course of study. Implications
      for future research are discussed.
description: Internetbasierte Self-Assessments,
      die im deutschen Hochschulraum zunehmende Verbreitung finden,
      sollen es Studieninteressierten ermöglichen, ihre
      individuelle Eignung für einen Studiengang fundierter
      einzuschätzen, und leisten damit einen wesentlichen Beitrag
      zur Studienorientierung und Studienentscheidung. Durch eine
      Förderung der Selbstselektion zielen Self-Assessments auf
      eine Erhöhung der Passung zwischen Studierenden und ihrem
      Studiengang. Über diesen Wirkmechanismus wird angenommen,
      dass Self-Assessments positive Auswir-kungen auf verschiedene
      Kriterien des Studienerfolgs haben. Mehrere Studien zur
      Kriteriumsvalidität von Self-Assessments konnten bereits
      einen Zusam-menhang zwischen dem individuellen Abschneiden im
      Self-Assessment – gemessen vor oder kurz nach Studienbeginn –
      und später erzielten Prüfungsleistungen nachweisen (u.a.
      Hartweg, 2010; Zimmerhofer, 2008). Für subjektive Kriterien
      des Studienerfolgs wie die Studienzufriedenheit existieren
      dagegen kaum empirische Befunde, zudem ist ein Mangel an
      längsschnittlichen Studien festzustellen. Das Hauptziel der
      vorliegenden Dissertation ist es daher, in einem
      längsschnittlichen Design die prädiktive Validität
      internetbasierter Self-Assessments für die
      Studienzufriedenheit zu untersuchen. Hierfür soll analysiert
      werden, in welchem Maße die zu Studienbeginn gemessenen
      Ausprägungen auf verschiedenen Self-Assessment-Skalen die
      Zufriedenheit im späteren Studienverlauf vorherzusagen
      vermögen. Das Forschungsvorhaben wurde anhand der Marburger
      Self-Assessments für die Studienfachrichtungen Biologie und
      Wirtschaftswissenschaften im Rahmen dreier Beiträge und
      mittels regressionsanalytischer Auswertungen bearbeitet. Der
      erste Beitrag stellt die psychometrische Analyse und erste
      Prognosevalidierung eines neu entwickelten Instruments zur
      studentischen Organisationsfähigkeit vor. Der zweite Beitrag
      untersucht die prädikative Validität verschiedener kognitiver
      und nicht-kognitiver Self-Assessment-Komponenten und prüft
      vergleichend, welche Komponenten eines Self-Assessments
      Studiennoten und welche Studienzufriedenheit vorhersagen
      können. Der dritte Beitrag konzentriert sich auf die Analyse
      der prädiktiven Validität von Studienerwartungen für die
      Studienzufriedenheit, die im Self-Assessment über einen
      Fragebogen zum Erwartungsabgleich erfasst werden. Die
      Auswertungen zum ersten Beitrag ergeben signifikante
      Zusammenhänge zwischen den Skalen zur studentischen
      Organisationsfähigkeit und der Studienzufriedenheit im ersten
      Semester (N = 205 Studierende der Biologie und
      Wirtschaftswissenschaften). Die Ergebnisse des zweiten
      Beitrags, die auf dem Self-Assessment der
      Wirtschaftswissenschaften (N = 102) basieren, belegen
      inkrementelle Validität für mehrere
      Self-Assessment-Komponenten über die Note der
      Hochschulzugangsberechtigung hinaus. Während die kognitiven
      Fähigkeiten mit der Durchschnittsnote im zweiten Semester
      korrelieren, erweisen sich für die Studienzufriedenheit im
      zweiten Semester das zu Studienbeginn erforderliche Vorwissen
      und die nicht-kognitiven Variablen als prognoserelevant. Im
      dritten Beitrag (N = 85 Studierende der Biologie) leistet die
      Dimension der Naturwissenschaften – also die korrekte
      Annahme, sich im Biologiestudium neben biologischen Inhalten
      auch mit Mathematik, Chemie und Physik zu beschäftigen –
      einen signifikanten Beitrag zur Vorhersage der
      Studienzufriedenheit. Zusammenfassend konnten mit der
      vorliegenden Arbeit überzeugende Validitätshinweise von
      Self-Assessments für die Studienzufriedenheit gewonnen
      werden. Für eine optimale Vorher-sage von objektiven und
      subjektiven Studienerfolgskriterien durch Self-Assessments
      über die Note der Hochschulzugangsberechtigung hinaus sollten
      fähigkeitsbezogene, wissensbezogene sowie
      persönlichkeitsbezogene Prädiktoren kombiniert, Aspekte der
      studentischen Organisationsfähigkeit abgefragt und ein
      Erwartungsabgleich für kritische Studieninhalte angeboten
      werden. Implikationen für zukünftige Forschungsfragen werden
      diskutiert.