Andere

Neuer Test fur Computer: Grading Essays auf College-Niveau, Die New York

23.09.2016

Essay-Grading-Software Bietet Professoren eine Pause

stellen Sie sich vor, ein college-Examen, und statt der ubergabe in einem blauen Buch und bekommen a Grad von einem professor, der ein paar Wochen spater durch anklicken des «senden» — Taste, wenn Sie fertig sind, erhalten Sie eine Note zuruck, die augenblicklich Ihren Aufsatz erzielte durch einen software-Programm.

Und dann, statt Sie fertig mit der Prufung, stellen Sie sich vor, das system wurde sofort lassen Sie schreiben Sie den test, um zu versuchen zu verbessern Sie Ihre grade.

EdX. die nonprofit-Unternehmen, gegrundet von Harvard und dem Massachusetts Institute of Technology zu bieten Kurse auf dem Internet, hat gerade eingefuhrt ein solches system und wird automatisierte software kostenlos uber das Web zu einer institution, der es nutzen mochte. Die software nutzt kunstliche Intelligenz, um Klasse student essays und kurze schriftliche Antworten, die Befreiung der Professoren fur andere Aufgaben.

Die neue service bringt die Bildungs-Konsortium in einen wachsenden Konflikt uber die Rolle der Automatisierung in der Bildung. Obwohl automatisierte grading-Systeme fur multiple-choice-und wahr-falsch-tests sind nun weit verbreitet, der Einsatz von kunstlicher Intelligenz-Technologie, um grade essay Antworten noch nicht erhalten hat, verbreitete Billigung durch Erzieher und hat viele Kritiker.

Anant Agarwal, einem Elektro-Ingenieur, ist Prasident von EdX, vorhergesagt, dass die instant-grading-software ein nutzliches padagogisches Instrument, ermoglichen den Studenten zu nehmen, tests und Aufsatze schreiben uber und uber und verbessern die Qualitat Ihrer Antworten. Er sagte, dass die Technologie bieten deutliche Vorteile gegenuber dem traditionellen Unterricht, wo die Schuler sich oft Tage oder Wochen warten, fur die Klassen.

«Es gibt einen enormen Wert in das lernen mit instant feedback», so Dr. Agarwal, sagte. «Schuler sagen uns, Sie lernen viel besser mit instant-feedback.»

Aber Skeptiker sagen, dass das automatisierte system, das ist kein Spiel fur live-Lehrer. Ein langjahriger Kritiker, Les Perelman, gezogen hat nationale Aufmerksamkeit mehrere Male fur die Zusammenstellung von Unsinn essays, die sich getauscht haben grading-software-Programme in geben hohe Mark. Er wurde auch sehr kritische Studien, die behaupten, zu zeigen, dass die software vergleicht nun die menschliche Grader.

Werbung

«Meine erste und wichtigste Einwand gegen die Forschung ist, dass Sie nicht haben jede gultige statistische test-Vergleich der software, die direkt fur die menschliche Grader», sagte Herr Perelman, ehemaliger Direktor des schreiben und eine aktuelle Forscher am M. I. T.

Er gehort zu einer Gruppe von Padagogen, die im vergangenen Monat begann die Verbreitung einer petition gegnerischen automatisierte Bewertung der software. Die Gruppe, die nennt sich Profis Gegen Maschine Auswertung der Studentischen arbeiten in der High-Stakes-Assessment. gesammelt hat fast 2.000 Unterschriften, unter anderem von Personlichkeiten wie Noam Chomsky.

«Lassen Sie’ s Gesicht, die Realitat des automatischen essay scoring,» die group-Anweisung liest in Teil. «Computer konnen nicht «Lesen». Sie konnen nicht Messen die Grundlagen der effektive schriftliche Kommunikation: Genauigkeit, mit der Begrundung, Angemessenheit der Beweise, Sinn, ethische Haltung, uberzeugendes argument, sinnvolle Organisation, Klarheit und Wahrhaftigkeit, unter anderem.»

Aber EdX erwartet, dass seine software verabschiedet werden weitgehend von den Schulen und Universitaten. EdX bietet Kostenlose online-Kurse von Harvard, M. I. T. und der University of California, Berkeley; in diesem Herbst, es wird hinzufugen von Klassen aus Wellesley, Georgetown und der University of Texas. In allen 12 Universitaten an EdX, bietet Zertifikate zum Abschluss des Kurses und hat gesagt, dass es plant, weiter zu expandieren, im nachsten Jahr, einschlie?lich des Hinzufugens von internationalen Schulen.

Werbung

Werbung

Die EdX-assessment-tool erfordert menschlichen Lehrern oder Klassen, die erste Klasse 100 essays oder essay-Fragen. Das system verwendet dann eine Vielzahl von machine-learning-Techniken, um selbst trainieren zu konnen, grade eine beliebige Anzahl von essays oder Antworten automatisch und fast augenblicklich.

Die software zuweisen einer Klasse, je nach scoring-system geschaffen, durch die Lehrer, ob es ein Brief, den Grad oder numerischen Rang. Es wird auch Allgemeines feedback, wie erzahlt ein student, ob eine Antwort war am Thema oder nicht.

Dr. Agarwal sagte, dass er glaubte, dass die software kurz vor der Fahigkeit, Menschen zu benoten.

«Das ist maschinelles lernen und es ist ein langer Weg zu gehen, aber es ist gut genug, und der Kopf ist riesig», sagte er. «Wir haben festgestellt, dass die Qualitat der Sortierung ist ahnlich zu der variation, die Sie finden, von Lehrer zu Lehrer.»

EdX ist nicht das erste automatisierte Bewertung der Technologie, die Termine zu fruhen mainframe-Computer in den 1960er Jahren. Es gibt nun eine Reihe von Unternehmen bieten kommerzielle Programme zu Note schriftlicher test Antworten, und vier Staaten — Louisiana, North Dakota, Utah und West Virginia — mit irgendeiner form der Technologie an weiterfuhrenden Schulen. Eine funfte, Indiana, hat damit experimentiert. In einigen Fallen wird die software dient als «second reader» zur Prufung der Zuverlassigkeit des menschlichen. Klasse.

Aber der wachsende Einfluss der EdX-Konsortiums, standards zu setzen durfte das der Technologie einen Schub. Am Dienstag, Stanford bekannt gegeben, dass es funktionieren wurde mit EdX ist die Entwicklung eines gemeinsamen Bildungs-system, dass die Einbindung der automatisierten Bewertung der Technologie.

Zwei start-ups, Coursera und Udacity. vor kurzem gegrundet von den Stanford-Mitglieder der Fakultat zu erstellen, die «massive open online courses» oder MOOCs, sind auch verpflichtet, automatisierte Bewertungssysteme, weil der Wert von instant-feedback.

«Es ermoglicht den Studierenden zu erhalten unmittelbar feedback auf Ihre Arbeit, so dass das lernen verwandelt sich in ein Spiel, bei dem Studenten naturlich gravitierenden in Richtung Wiedervorlage die arbeiten, bis Sie es richtig machen», sagt Daphne Koller, ein computer-Wissenschaftler und einer der Grunder von Coursera.

Letztes Jahr hat die Hewlett Foundation, grant-making-Organisation, gegrundet von einer der Hewlett-Packard-Grunder und seine Frau, gesponsert von zwei $100.000, die Preise Zielen auf die Verbesserung der software, die Noten essays und kurze Antworten. Mehr als 150 Mannschaften jeder Kategorie. Ein Gewinner einer der Hewlett-Wettbewerbe, Vik Paruchuri, wurde engagiert, von EdX um zu helfen design Ihrer Bewertung software.

«Einer unserer Schwerpunkte ist zu helfen, Kinder lernen, wie man kritisch zu denken», sagte Victor Vuchic, ein Programm officer bei der Hewlett Foundation. “Es ist wahrscheinlich unmoglich zu tun, dass mit multiple-choice-tests. Die Herausforderung ist, diese Menschen mussen Grader, und so Kosten Sie viel mehr und Sie nehmen sich viel mehr Zeit.»

Mark D. Shermis, professor an der University of Akron in Ohio, uberwacht die Hewlett-Foundation-Wettbewerb auf automated essay scoring, und schrieb ein Papier uber das experiment. In seiner Ansicht, die Technologie — obwohl Sie unvollkommen sind — hat einen Platz in der Bildungs-Einstellungen.

Mit immer gro?eren Klassen, ist es unmoglich, fur die meisten Lehrer geben den Studierenden die sinnvolle Ruckmeldungen auf das schreiben von Zuordnungen, sagte er. Plus, sagte er, die Kritiker der Technologie haben dazu zu kommen, die von der nation die besten Universitaten, wo das Niveau der Padagogik ist viel besser als an den meisten Schulen.

«Oft kommen Sie aus sehr renommierten Institutionen, in denen Sie in der Tat tun, eine viel bessere Arbeit bei der Bereitstellung von feedback als eine Maschine je konnte,» Dr. Shermis sagte. «Es scheint einen Mangel an Wertschatzung fur das, was tatsachlich in der realen Welt.»

Eine version dieses Artikels erscheint in print am April 5, 2013, Seite A1 der New York Ausgabe mit der Schlagzeile: Software Gesehen, die Angabe von Noten in Aufsatz-Tests. Um Nachdrucke | Heute’s Papier | Subscribe

Beschreibung des Artikels: software fur Computer Ein system entwickelt, das durch ein joint venture zwischen Harvard und M. I. T. nutzt kunstliche Intelligenz, um zu beurteilen, studentische arbeiten und kurze schriftliche Antworten, die Befreiung der Lehrer fur andere Aufgaben. EdX,Computer und Internet,Kunstliche Intelligenz,Harvard University,Massachusetts Institute of Technology,Tests und Prufungen,Colleges und Universitaten

Quelle: Neuer Test fur Computer: Grading Essays auf College-Niveau — The New York Times

Також ви можете прочитати