Stammdaten

Titel: Zur Beurteilung von Schreibleistungen aus Deutsch als Erstsprache in High Stakes Tests.
Untertitel: Die Stabilität von Skalendeskriptoren im Bewertungsraster für die österreichische Matura (Abitur).
Kurzfassung:

The present study describes a first step towards validating the rating scale for assessing L1 German writing in the context of the Austrian Matura exam. After describing the process of scale development in the context of the exam reform, it reports on an empirical study into the stability of scale descriptors. The 70 scale descriptors were assessed in terms of their difficulty by a panel of 100 experienced teachers who had not undergone training in the use of the scale. This data served as the basis for studying overall rater agreement, the correspondence of the sequence of empirically scaled descriptors to the intended sequence, and for studying rater agreement on individual descriptors. It was found that using the scale without previous rater training is not recommendable and rater training is indispensable. The highest level on the scale was found to be the most consensual among the assessors. There is relatively high agreement with regard to what constitutes excellence in L1 German writing. The descriptors on the critical pass level were found to function relatively well although at least two descriptors turned out to be unstable and should be focused on in rater training. Overall, a high number of stable descriptors was found, which is remarkable given that the assessors had not yet received training in using the scale. Suggestions for areas of focus in assessor training or minor improvements of the scale are made.

Schlagworte:
Publikationstyp: Beitrag in Zeitschrift (Autorenschaft)
Erscheinungsdatum: 01.12.2016 (Online)
Erschienen in: Colloquium - New Philologies
Colloquium - New Philologies
zur Publikation
 ( Alpen-Adria-Universität Klagenfurt; N. Dobric )
Titel der Serie: -
Bandnummer: -
Heftnummer: -
Erstveröffentlichung: Ja
Version: -
Seite: -

Versionen

Keine Version vorhanden
Erscheinungsdatum: 01.12.2016
ISBN (e-book): -
eISSN: -
DOI: -
Homepage: http://colloquium.aau.at/index.php/Colloquium
Open Access
  • In einem Open-Access-Journal erschienen

Zuordnung

Organisation Adresse
Universität Klagenfurt
 
Zentraler Informatikdienst (ZID)
Universitätsstr. 65-67
A-9020 Klagenfurt
Österreich
  +43 463 2700 9600
   zid@aau.at
http://zid.aau.at
zur Organisation
Universitätsstr. 65-67
AT - A-9020  Klagenfurt
Fakultät für Kultur- und Bildungswissenschaften
 
Institut für Anglistik und Amerikanistik
Universitätstraße 65 - 67
9020 Klagenfurt
Österreich
   anglistik@aau.at
https://www.aau.at/en/english/
zur Organisation
Universitätstraße 65 - 67
AT - 9020  Klagenfurt

Kategorisierung

Sachgebiete
  • 602007 - Angewandte Sprachwissenschaft
Forschungscluster Kein Forschungscluster ausgewählt
Zitationsindex
  • n.a.
Informationen zum Zitationsindex: Master Journal List
Peer Reviewed
  • Ja
Publikationsfokus
  • Science to Science (Qualitätsindikator: n.a.)
Klassifikationsraster der zugeordneten Organisationseinheiten:
  • Für die zugeordneten Organisationseinheiten sind keine Klassifikationsraster vorhanden
Arbeitsgruppen
  • Angewandte Linguistik

Kooperationen

Keine Partnerorganisation ausgewählt

Beiträge der Publikation

Keine verknüpften Publikationen vorhanden