Perspektiven auf mehrere Scores
Ansätze zur Bildung von zusammengesetzten Scores Unter Verwendung mehrerer Sätze von ACT Scores
Im Laufe der Jahre hat sich die Frage gestellt, wie Hochschulen und Universitäten ACT-Testergebnisse verwenden sollten, die ihnen von Bewerbern geschickt wurden, die die ACT mehr als einmal angenommen haben. Dieses Problem ist drängender geworden, da die Schüler zunehmend mehr als einmal die Tat ergreifen.
Ein Überblick über die aktuelle Landschaft der College-Zulassung unterstreicht die Tatsache, dass es keine „One-size-fits-all“ – Lösung gibt., Einige postsekundäre Einrichtungen verwenden die neueste Punktzahl eines Schülers. Andere „wählen und wählen“, indem Sie die besten Ergebnisse auswählen, die ein Student in jedem Inhaltsbereich im Laufe mehrerer Testversionen erzielt hat, und eine kombinierte höchste zusammengesetzte Punktzahl (Superscoring) bilden. Und wieder andere haben unterschiedliche Richtlinien.
Was ist der ACT-Composite-score?
Die HANDLUNG besteht aus vier tests: Englisch, Mathematik, Lesen und Wissenschaft. Der score-Bereich für jeden der vier tests ist 1-36., Die zusammengesetzte Punktzahl ist, wie von ACT berichtet, der Durchschnitt der vier Testergebnisse, die während einer einzelnen Testverabreichung erzielt wurden, gerundet auf die nächste ganze Zahl.
Wenn ein Schüler Testergebnisse in Englisch, Mathematik, Lesen und Naturwissenschaften von 20, 15, 18 und 17 erhält und ein anderer Schüler Noten von 15, 18, 17 und 20 erhält, verdienen beide Schüler die gleiche Gesamtpunktzahl—18., Obwohl aus den Fachbereichsbewertungen ersichtlich ist, dass ein Schüler in Englisch und Lesen stärker und der andere in Mathematik und Naturwissenschaften stärker ist, repräsentieren die beiden Ergebnisse das gleiche Gesamtleistungsniveau. ACT betrachtet daher die zusammengesetzten Ergebnisse der beiden Schüler als vergleichbar.
Einzelne Formen der ACT-Tests werden gleichgesetzt, ein Prozess, der beispielsweise sicherstellt, dass eine Punktzahl von 19 auf einer Form des Englischtests das gleiche Leistungsniveau darstellt wie eine Punktzahl von 19 auf jeder anderen Form des Englischtests, unabhängig davon, wann die Formulare verabreicht wurden., Ein weiterer Beitrag zur Vergleichbarkeit der Ergebnisse zwischen den Formularen ist die Standardisierung der Testverwaltung: Mit Ausnahme von Tests mit verlängerter Zeit für Studenten, die sich für solche Unterkünfte qualifizieren, werden alle Formen des GESETZES innerhalb fester Fristen, in vorgeschriebener Reihenfolge und unter Standardbedingungen durchgeführt.
Was ist mit dem Schreibtest?
Das GESETZ enthält auch einen optionalen Schreibtest., Studenten, die den optionalen Schreibtest absolvieren, erhalten eine einzelne Schreibpunktzahl auf einer Skala von 2-12 und fünf zusätzliche Punktzahlen: eine englischsprachige Arts (ELA) – Punktzahl auf einer Skala von 1-36 und Punktzahlen für vier Bereiche der Schreibkompetenzen (Ideen und Analyse, Entwicklung und Unterstützung, Organisation sowie Sprachgebrauch und Konventionen) auf einer Skala von 2-12. Der ELA-Score wird anhand der Ergebnisse berechnet, die bei den Englisch -, Lese-und Schreibtests in derselben Verwaltung erzielt wurden.,
Was sind postsekundären Institutionen der Verwendung als eine ACT Composite-score für Studenten, die haben mehrere Sätze von test erzielt?
Eine postsekundäre Einrichtung kann einen „neuesten“, „single highest“ oder „combined highest“ Ansatz anwenden, um zu definieren, welche zusammengesetzte Punktzahl sie in Betracht zieht:
- Die neueste zusammengesetzte Punktzahl ist einfach die zusammengesetzte Punktzahl, die aus den vier Testergebnissen der neuesten Testverwaltung eines Schülers erhalten wird.
- Die höchste zusammengesetzte Einzelpunktzahl ist die höchste zusammengesetzte Punktzahl, die ein Student in einer einzelnen Testverwaltung erhalten hat.,
- Die kombinierte höchste zusammengesetzte Punktzahl (Superscoring) ist die Punktzahl, die für einen Schüler erzielt wird, der mehr als einmal getestet hat, indem er das höchste Englisch, die höchste Mathematik, das höchste Lesen und die höchsten wissenschaftlichen Punktzahlen verwendet, um einen Durchschnitt zu bilden—unabhängig von der Reihenfolge, aus der jede Punktzahl erhalten wurde.,> Oktober 2014
20 23 21 21 21 HANDELN Superscore 22 23 23 22 23 John erhielt eine aktuelle Composite-Score von 21 (auf der dritten Test Verwaltung im Oktober 2014)., Er erhielt eine einzige höchste zusammengesetzte Punktzahl von 22 (bei der zweiten Verwaltung im Juni 2014). Die Ergebnisse von Johns zweitem Englischtest (22), drittem Mathematiktest (23), Erstlesetest (23) und zweitem Wissenschaftstest (22) geben ihm eine kombinierte höchste zusammengesetzte Punktzahl (Superscore) von 23.
Warum würde postsekundären Institutionen bevorzugen einen Ansatz gegenüber dem anderen?
Jeder Ansatz hat seine Vorteile. Die neueste Composite-score scheint zu reflektieren, der Prüfling die aktuelle Leistung genauer als die anderen Ansätze., Die höchste Gesamtpunktzahl hingegen erlaubt es, dass die Schüler nicht immer die beste Leistung erbringen. Wenn zum Beispiel ein Schüler eine schlechte Nachtruhe hatte, einen plötzlichen Nervenanfall erlitt oder mit einem persönlichen Problem beschäftigt war, kann der jüngste Testwert des Schülers seine Fähigkeiten weniger genau widerspiegeln als höhere Werte, die an einem früheren Testdatum erzielt wurden. Die Verwendung der kombinierten höchsten zusammengesetzten Punktzahl könnte aus ähnlichen Gründen verteidigt werden.
Welchen Ansatz empfiehlt ACT?,
Wir glauben, dass einzelne postsekundären Institutionen sollten entscheiden, welcher Ansatz am besten für Sie, da Sie sind in der besten position, um zu verstehen, Ihre Bedürfnisse und den Kontext, in dem die Partituren verwendet werden.
In diesem Sinne empfiehlt ACT einige zusätzliche Bestimmungen:
1. Konsistenz. Unabhängig davon, welche Score Use-Richtlinie eine Institution wählt, sollte diese Richtlinie konsequent auf alle Bewerber angewendet werden. Bedenken hinsichtlich der Fairness ergeben sich, wenn eine Score Use Policy (neueste Punktzahl) auf einige Gruppen von Bewerbern angewendet wird (z.,, frauen, ACT-Testteilnehmer) und eine andere Score Use Policy (Superscore) wird auf andere Gruppen von Bewerbern (z. B. Männer, SAT-Testteilnehmer) angewendet.
2. Konkordanz. Für Institutionen, die sowohl ACT-als auch SAT-Scores von Bewerbern erhalten, sollte die 2018 ACT-SAT-Konkordanz verwendet werden, um SAT-Scores in ACT-Scores umzuwandeln und umgekehrt. Angesichts der Änderung der Punkteskala für den SAT 2016 benachteiligt die Verwendung der vorherigen ACT-SAT-Konkordanz ACT-Testteilnehmer unfair.,
Diese Empfehlungen gelten nicht nur für Hochschulen und Universitäten, sondern auch für Stipendiatenagenturen oder Institutionen, die ACT-und SAT-Scores verwenden, um wichtige Bildungsentscheidungen zu treffen.
ACTS Position zum Superscoring
Wir möchten einige Marktverwirrungen in Bezug auf Superscoring beseitigen. In der Vergangenheit hat ACT von der Verwendung von Superscoring abgeraten, da Bedenken bestanden, dass Superscoring die Fähigkeiten einiger Schüler überbewerten könnte (in der Testterminologie, um „positive Messfehler zu nutzen“)., Um diese Hypothese zu testen, führte ACT kürzlich eine Studie über die Gültigkeit und Fairness verschiedener Bewertungsmethoden durch. Entgegen unseren Erwartungen zeigten die Ergebnisse, dass Superscores für die Noten des ersten Jahres genauso prädiktiv (eigentlich etwas prädiktiver) waren wie andere Bewertungsmethoden (jüngste, durchschnittliche, höchste Verwaltung). Darüber hinaus führte das Superscoring zu der geringsten Menge an differentieller Vorhersage, die mit der Häufigkeit verbunden war, mit der ein Student testet., Interessanterweise stellten wir fest, dass die Noten im ersten Jahr für Schüler, die häufiger getestet wurden, unterproportional waren, selbst wenn Vorhersagemodelle auf Superscores basierten.1 Das heißt, die Retester haben im College eine bessere Leistung erbracht als erwartet, basierend auf ihren Testergebnissen. Und dieser Vorhersagefehler wurde minimiert, wenn im Vergleich zu den anderen Bewertungsmethoden Superscores verwendet wurden., Wenn Superscores einen positiven Messfehler widerspiegeln – das heißt, eine Überschätzung des wahren Leistungsniveaus–, würden Superscores den Schülern vorhersagen, dass sie im College höhere Noten verdienen als das, was sie tatsächlich verdient haben, und diese Überprädiktion würde zunehmen, wenn die Anzahl der Wiederholungsfälle zunimmt. Die Ergebnisse der Studie deuteten jedoch genau auf das Gegenteil hin.
Warum ist das der Fall? Eine Hypothese ist, dass Superscores und die Anzahl der Wiederholungsfälle nicht nur die akademische Vorbereitung widerspiegeln, sondern auch eine Motivationskomponente., Insbesondere ist der Student, der bereit ist, auf mehrere Samstage zu verzichten, um für einen mehrstündigen Test zu sitzen, in der Hoffnung, seine Punktzahl vielleicht zu erhöhen, auch der Student, der wahrscheinlich Fragen in seinen College-Kursen stellt, seinen Professor während der Bürozeiten besucht und alle zusätzlichen Kreditmöglichkeiten nutzt, um die bestmögliche Note sicherzustellen. Einen Überblick über diese Studie gibt der Higher Education Research Digest 2017.
Auf der Grundlage dieser Forschung unterstützt ACT die Verwendung von Superscoring bei der Entscheidungsfindung für die Zulassung zum College.,
Die Forschung am SAT fand ähnliche Ergebnisse im Zusammenhang mit Superscoring (Boldt et al., 1986).
Welchen Ansatz verfolgt die NCAA?
Die NCAA verwendet die maximale Summe der Testergebnisse, im Wesentlichen eine Variante der kombinierten höchsten zusammengesetzten Punktzahl, als Teil der Bestimmung, ob Schüler die anfänglichen Zulassungsstandards des Verbandes erfüllen.
Sollten Schüler die Tat mehr als einmal nehmen?
Schüler, die zusätzliche relevante Kursarbeit, seit Sie zum letzten mal getestet, möchten möglicherweise antesten, da Sie Grund zu der Annahme, Sie wird das nächste mal besser machen., Studenten, die glauben, dass ihre vorherigen Ergebnisse ihre Leistung nicht genau widerspiegeln, möchten möglicherweise auch einen erneuten Test durchführen. Wenn sie zum Beispiel krank oder anderweitig unempfindlich waren, wenn sie getestet wurden, oder wenn sie mit Testverfahren nicht vertraut waren, ist es vernünftig zu erwarten, dass sie beim erneuten Testen besser abschneiden.
Erhöht das Superscoring die Untergruppenunterschiede?
In einer aktuellen Studie, Subgruppen-Unterschiede sind weitgehend unbeeinflusst von den beiden scoring-Richtlinien untersuchten in der aktuellen Studie— zuletzt gegen superscoring., Angesichts der Tatsache, dass die Schüler dazu neigen, ihre Ergebnisse durch erneutes Testen und die hohe Zuverlässigkeit der ACT-Ergebnisse zu verbessern, ist es nicht verwunderlich, dass die Ergebnisse, die auf dem neuesten Testrekord eines Schülers basieren, denen auf der Grundlage von Superscoring sehr ähnlich sind. Auch die relativ geringe Häufigkeit (weniger als die Hälfte der Schüler) von Wiederholungstests insgesamt und Wiederholungstests mehr als einmal trägt zur Feststellung von kleinen bis keinen Unterschieden basierend auf Superscoring.,
Die Ergebnisse legen auch nahe, dass der leichte Anstieg der nicht standardisierten Unterschiede und standardisierten Unterschiede auf Unterschiede in den Retestraten zwischen den Untergruppen zurückzuführen ist. Analysen, die die Anzahl der Wiederholungstests eines Schülers untersuchten, zeigten, dass die Untergruppenunterschiede eher abnahmen als zunahmen, wenn Superscoring angewendet wurde.
Welche Auswirkungen hat das Superscoring auf Untergruppenunterschiede?
ACT wurde die Prüfung der Validität und fairness von verschiedenen scoring-Verfahren in den letzten Jahren., Entgegen den Erwartungen zeigten die Ergebnisse, dass die Ergebnisse, die auf der Superscoringmethode (als Superscores bezeichnet) basierten, im Vergleich zu anderen Bewertungsmethoden (neu, durchschnittlich, am höchsten) genauso vorhersagend (tatsächlich etwas prädiktiver) waren. Darüber hinaus führte das Superscoring zu der geringsten differentiellen Vorhersage durch die Anzahl der Male, die ein Student testete. Interessanterweise fanden wir heraus, dass die Noten im ersten Jahr für Schüler, die häufiger getestet wurden, unterpräsentiert waren, selbst wenn Vorhersagemodelle auf Superscores basierten.