https://frosthead.com

Μπορεί ένας υπολογιστής να βαθμολογήσει πραγματικά ένα δοκίμιο;

Στο μέλλον, οι υπολογιστές θα είναι οι γιατροί μας, οι στρατιώτες μας, οι πυροσβέστες μας και οι δάσκαλοί μας. Θα διαγνώσουν ασθένειες, θα φροντίσουν τα μωρά μας, θα προστατεύσουν τα σπίτια μας και θα διδάξουν τα παιδιά μας. Μια εταιρεία αναπτύσσει ήδη ένα πρόγραμμα ηλεκτρονικού υπολογιστή βαθμολόγησης που μπορεί να πάρει το φορτίο από καθηγητές και τυποποιημένους ισοπεδωτές δοκιμών. Αλλά μπορεί ένας υπολογιστής να αξιολογήσει πραγματικά ένα προσεκτικά κατασκευασμένο δοκίμιο;

Η εταιρεία, edX, σίγουρα το σκέφτεται. Προσφέρουν ήδη σε απευθείας σύνδεση μαθήματα σε ιδρύματα, μαζί με ένα σύστημα τεχνητής νοημοσύνης που θα βαθμολογεί τις μελέτες σπουδαστών. Ο John Markoff στους New York Times εξηγεί:

Ο Anant Agarwal, ένας ηλεκτρολόγος μηχανικός που είναι πρόεδρος της EdX, προέβλεψε ότι το λογισμικό άμεσης βαθμολόγησης θα ήταν ένα χρήσιμο παιδαγωγικό εργαλείο, το οποίο θα επέτρεπε στους μαθητές να κάνουν δοκιμές και να γράφουν δοκιμίες ξανά και ξανά και να βελτιώνουν την ποιότητα των απαντήσεών τους. Είπε ότι η τεχνολογία θα προσφέρει ξεχωριστά πλεονεκτήματα σε σχέση με το παραδοσιακό σύστημα τάξεων, όπου οι μαθητές συχνά περιμένουν ημέρες ή εβδομάδες για βαθμούς.

"Υπάρχει τεράστια αξία στη μάθηση με άμεση ανατροφοδότηση", δήλωσε ο Δρ. Agarwal. "Οι μαθητές μας λένε ότι μαθαίνουν πολύ καλύτερα με άμεση ανατροφοδότηση".

Το ερώτημα αν η άμεση ανατροφοδότηση είναι υψηλής ποιότητας ή όχι είναι μια άλλη ερώτηση. Οι σκεπτικιστές των υπολογιστών αυτών δεν είναι δύσκολο να βρεθούν. Μια ομάδα, η οποία αποκαλεί τους εαυτούς τους επαγγελματίες κατά τη μηχανική βαθμολόγηση των φοιτητικών δοκίμων στην αξιολόγηση υψηλού σταδίου, εξέδωσε δήλωση και συλλέγει υπογραφές για να μιλήσει εναντίον της παράδοσης της αποστολής βαθμολόγησης σε έναν υπολογιστή. Γράφουν:

Ας αντιμετωπίσουμε τις πραγματικότητες της αυτόματης βαθμολόγησης δοκίμιου. Οι υπολογιστές δεν μπορούν να "διαβάσουν". Δεν μπορούν να μετρήσουν τα βασικά στοιχεία της αποτελεσματικής γραπτής επικοινωνίας: ακρίβεια, συλλογιστική, επαρχία αποδεικτικών στοιχείων, καλή λογική, ηθική στάση, πειστικά επιχειρήματα, σημαντική οργάνωση, σαφήνεια και ειλικρίνεια.

Η αναφορά ζητεί από τους νομοθέτες να σταματήσουν να χρησιμοποιούν υπολογιστές για ταξινόμηση και τα σχολεία να σταματήσουν να αγοράζουν τα αυτοματοποιημένα συστήματα βαθμολόγησης.

Ο Agarwal αναγνωρίζει ότι το λογισμικό μπορεί να είναι καλύτερο και ελπίζει ότι θα βελτιώσει τη διάκριση ενός καλού δοκίμιου από ένα μέτριο. "Αυτό είναι η μηχανική μάθηση και υπάρχει πολύς δρόμος, αλλά είναι αρκετά καλός και η ανοδική είναι τεράστια", δήλωσε στους New York Times . Επίσης, λέει, όποιος πιστεύει ότι οι καθηγητές είναι συνεπείς, ξεγελάει τον εαυτό της. "Βρήκαμε ότι η ποιότητα της ταξινόμησης είναι παρόμοια με την παραλλαγή που βρίσκετε από εκπαιδευτή σε εκπαιδευτή."

Στην πραγματικότητα, μερικές μελέτες έχουν υποδείξει ότι οι υπολογιστές και οι εκπαιδευτικοί παράγουν το ίδιο είδος διακύμανσης στις βαθμολογίες. Μια μελέτη του Mark Shermis στο Πανεπιστήμιο Akron κατέληξε στο συμπέρασμα ότι "η αυτόματη βαθμολόγηση των δοκίμιων ήταν ικανή να παράγει βαθμολογίες παρόμοιες με τις ανθρώπινες βαθμολογίες για αντικείμενα γραφής εκτεταμένης απόκρισης με ίσες επιδόσεις τόσο για το είδος πηγής όσο και για το παραδοσιακό είδος γραφής" δεν δημοσιεύθηκε ποτέ σε ένα περιοδικό και άλλοι ερευνητές αμφισβήτησαν τους ισχυρισμούς του. Ο Les C. Perelman από το MIT έγραψε μια απάντηση στο έγγραφο Shermis, γράφοντας ότι «μια προσεκτική εξέταση της μεθοδολογίας του χαρτιού και των συνόλων δεδομένων που χρησιμοποιούνται δείχνει ότι ένας τέτοιος ισχυρισμός δεν υποστηρίζεται από τα δεδομένα της μελέτης».

Η ομάδα των επαγγελματιών αναφέρει επίσης πολλά χαρτιά που υποδηλώνουν ότι οι υπολογιστές δεν είναι τόσο καλοί όσο οι εκπαιδευτικοί στην αξιολόγηση των φοιτητών.

Πιθανότατα, πρόκειται για το ερώτημα εάν αυτοί οι υπολογιστές είναι αρκετά ικανοί να βαθμολογούν ακόμα, όχι εάν θα είναι ποτέ. Αλλά δεν είναι μόνο εκπαιδευτικοί που θα αποκτήσουν περισσότερη τεχνολογία, οι μαθητές θα είναι επίσης. Αν οι μαθητές μάθουν τι ψάχνει το πρόγραμμα, θα μπορούσαν απλά να γράψουν ένα πρόγραμμα οι ίδιοι για να γράψουν με τη σειρά τους το τέλειο δοκίμιο με βάση τις προδιαγραφές λογισμικού. Ίσως στο μέλλον, οι ηλεκτρονικοί δάσκαλοι θα βαθμολογούν τους φοιτητές υπολογιστών.

Περισσότερα από το Smithsonian.com:

Η Εσθονία διδάσκει το 100 τοις εκατό των πρώτων γκριζάρων της στον κώδικα
Διδασκαλία των αστυνομικών να δουν

Μπορεί ένας υπολογιστής να βαθμολογήσει πραγματικά ένα δοκίμιο;