技術(shù)
導(dǎo)讀:當(dāng)今年秋季的成績(jī)單出來的時(shí)候,一些家長(zhǎng)可能會(huì)收到令人不悅的“驚喜”:孩子的成績(jī)低于預(yù)期。
前段時(shí)間,江蘇一家長(zhǎng)大呼“我就退出家長(zhǎng)群怎么了”迅速引起公眾關(guān)注。
很多家長(zhǎng)在感嘆“壓垮一個(gè)成年人只需一個(gè)家長(zhǎng)群”的同時(shí),繼續(xù)大倒“苦水”;而老師們也頻頻“發(fā)聲”,有人說自己到了深夜11點(diǎn)還在微信群里回復(fù)家長(zhǎng)的咨詢信息。
隨著“家長(zhǎng)退群”事件持續(xù)發(fā)酵,江西、遼寧等省紛紛出臺(tái)文件,明確指出教師必須親自批改作業(yè),嚴(yán)禁家長(zhǎng)、學(xué)生代勞。
家長(zhǎng)和老師各有苦楚,那么批改作業(yè)這個(gè)事,交給AI怎么樣?我們可以看看美國(guó)已經(jīng)應(yīng)用這項(xiàng)技術(shù)的情況。
自動(dòng)批改軟件經(jīng)常把正確的答案標(biāo)注為錯(cuò)誤
當(dāng)今年秋季的成績(jī)單出來的時(shí)候,一些家長(zhǎng)可能會(huì)收到令人不悅的“驚喜”:孩子的成績(jī)低于預(yù)期。
但是這可能并不是他們孩子的學(xué)習(xí)情況的準(zhǔn)確反饋,而是許多學(xué)校用來檢查作業(yè)的AI系統(tǒng)出現(xiàn)了故障。
除非家長(zhǎng)和老師對(duì)學(xué)生的考試重新檢查,否則這個(gè)問題很容易被忽略。當(dāng)一個(gè)五年級(jí)學(xué)生在一次科學(xué)考試中考砸了,才有人發(fā)現(xiàn)了這個(gè)問題,老師知道他已經(jīng)為考試做好了準(zhǔn)備,所以在網(wǎng)上打開測(cè)試,想看看這個(gè)學(xué)生漏掉了什么,發(fā)現(xiàn)他的一些答案是正確的,但批改錯(cuò)了。
"錯(cuò)誤 "是什么呢?只是大小寫字母的問題。
于是老師最好把他參加過的每一次考試都看一遍,看完后,又發(fā)現(xiàn)了幾個(gè)例子。
自動(dòng)評(píng)分承諾為教師節(jié)省了時(shí)間,但現(xiàn)在老師中的許多人卻要花上幾個(gè)小時(shí)的時(shí)間來研究學(xué)生的每次評(píng)估和考試的答案。
在某些情況下,Canvas學(xué)習(xí)平臺(tái)將回答的大寫字母的差異標(biāo)記為不正確。圖片:Julie Jargon《華爾街日?qǐng)?bào)》雜志社
錯(cuò)誤從何而來?
錯(cuò)誤的根源在于許多評(píng)分機(jī)器人的被設(shè)計(jì)的過于簡(jiǎn)單化。它們?cè)噲D將學(xué)生的回答與老師的答案進(jìn)行匹配。如果兩者不完全一樣,即使人類很容易就能看出答案的正確性,但答案往往會(huì)被標(biāo)記為錯(cuò)誤。這是突然轉(zhuǎn)向遠(yuǎn)程學(xué)習(xí)給老師、家長(zhǎng)和學(xué)生帶來的又一個(gè)頭疼的問題。
這類教育軟件的制造商承認(rèn)自動(dòng)評(píng)分存在的問題,并表示許多教師沒有足夠的時(shí)間接受如何準(zhǔn)確使用在線平臺(tái)的相應(yīng)培訓(xùn)。
科羅拉州奧羅拉市的一位單身母親Cristina Perez說,她的三個(gè)孩子已經(jīng)對(duì)整個(gè)遠(yuǎn)程學(xué)習(xí)的經(jīng)歷感到失望,包括在Canvas學(xué)習(xí)管理平臺(tái)中收到許多錯(cuò)誤的測(cè)試評(píng)分。我的孩子們?cè)诩永D醽喪褂玫奶摂M教室也是同一平臺(tái)。
"我所有的孩子都是'B'級(jí)學(xué)生,現(xiàn)在他們大部分課程都不及格。這就是它的糟糕之處。" Perez女士說,她的孩子們正在讀七年級(jí)、八年級(jí)和十年級(jí)。"這對(duì)孩子的心理健康和即便是簡(jiǎn)單嘗試造成什么樣的影響?"
孩子上學(xué)期間,Perez女士從事運(yùn)送汽車零件的工作,她說她發(fā)現(xiàn)很難聯(lián)系到老師。她的每個(gè)孩子都有七位老師。她說,她已經(jīng)給他們中的一些人發(fā)了電子郵件,告訴他們這些問題,但考試成績(jī)還是沒有得到糾正。
"我沒有時(shí)間坐在那里監(jiān)督這一切,"她說。"我已到了告訴我的孩子們只需登錄并做他們能做的地步了。他們的壓力已經(jīng)夠大了。
有些學(xué)生在Canvas中對(duì)問題的回答因?yàn)榕c教師的準(zhǔn)確措辭不一致而被自動(dòng)標(biāo)記為錯(cuò)誤。在這種情況下,教師已經(jīng)手動(dòng)調(diào)整了成績(jī)。圖片:Julie Jargon《華爾街日?qǐng)?bào)》雜志社
Patrick Lytle在伊利諾伊州高地公園(Highland Park)經(jīng)營(yíng)一家設(shè)計(jì)公司,他五年級(jí)的女兒告訴他,她在在線平臺(tái)Otus的一次數(shù)學(xué)測(cè)驗(yàn)中答錯(cuò)了答案。她的老師曾指導(dǎo)學(xué)生在答案中加入單位,而她在一道題上正確地回答了 "3克"。然而,自動(dòng)評(píng)分器卻標(biāo)錯(cuò)了,顯示正確答案只是 "3"。Lytle先生就此給老師發(fā)了郵件,老師糾正了該女生的分?jǐn)?shù)。
位于猶他州的教育軟件公司Instructure Inc.的首席產(chǎn)品官M(fèi)itch Benson表示,該公司經(jīng)常聽到有關(guān)其自動(dòng)評(píng)分功能的問題。他說,在虛擬學(xué)習(xí)的熱潮中,許多學(xué)校沒有足夠的時(shí)間對(duì)教師進(jìn)行徹底的培訓(xùn),讓他們了解Canvas作為遠(yuǎn)程學(xué)習(xí)一站式服務(wù)平臺(tái)的各種屬性。
"教師們不得不使用他們并不熟悉的工具,這帶來了一些新的挑戰(zhàn)," Benson先生說。
教師在Canvas中建立自己的虛擬教室,學(xué)生可以登錄視頻會(huì)議,訪問教育應(yīng)用程序,接收和提交作業(yè)并進(jìn)行測(cè)試。在舊版本的測(cè)驗(yàn)功能中——Instructure表示,在其6000個(gè)地區(qū)和大學(xué)客戶中,約有75%的客戶仍在使用該功能——學(xué)生必須完全按照教師輸入的問題來回答。大約18個(gè)月前,Canvas開始推出更新的測(cè)驗(yàn)功能,其算法可以檢測(cè)出答案何時(shí)足夠接近。
Benson先生說,在業(yè)務(wù)快速增長(zhǎng)的過程中,很難跟上所有的問題。Canvas的并發(fā)用戶數(shù)峰值已從4月的200萬上升到9月的650萬??头娫捙c使用量同時(shí)上升,上個(gè)月達(dá)到20多萬個(gè)求助電話。
Benson先生說,該公司的目標(biāo)是讓教師的工作更輕松。"我為我們有些落后的領(lǐng)域感到抱歉,"他說。
總部位于伊利諾伊州的Otus公司首席運(yùn)營(yíng)官Keith Westman也表示,自動(dòng)評(píng)分問題不是技術(shù)問題,而是教師培訓(xùn)問題。
當(dāng)教師在Otus中設(shè)計(jì)測(cè)試時(shí),他們可以包括幾個(gè)備用答案。例如,如果一道數(shù)學(xué)題的正確答案是 "3克",教師可以指定幾個(gè)被認(rèn)可為正確的答案,如 "3克",或是 "3"。教師可以選擇是否給學(xué)生一個(gè)滿分或半分的答案,可以要求答案完全吻合,或包含部分正確的文字。
Westman先生說,如果教師不喜歡自動(dòng)評(píng)分,他們可以完全禁用它。他還說:"自動(dòng)評(píng)分在起作用的時(shí)候是很好的,但當(dāng)它不起作用時(shí),對(duì)學(xué)生來說是毀滅性的。"
在170個(gè)K12學(xué)區(qū)使用的平臺(tái)Otus,讓教師包括幾個(gè)備用答案。該公司表示,自動(dòng)評(píng)分問題不是技術(shù)問題,而是教師培訓(xùn)問題。圖片:Otus
Kristin Beamish-Brown是明尼蘇達(dá)大學(xué)雙城分校的高級(jí)教學(xué)專家,她每天都要處理來自她第三學(xué)期西班牙語(yǔ)課上遠(yuǎn)程學(xué)生的惱人問題。盡管她警告他們,他們?cè)贑anvas中看到的自動(dòng)成績(jī)可能是錯(cuò)誤的,但她經(jīng)常在她二次檢查自動(dòng)批改成績(jī)之前聽到他們的消息。
"我有71個(gè)學(xué)生。我需要花上幾個(gè)小時(shí)的時(shí)間來評(píng)定本應(yīng)是自動(dòng)評(píng)分的測(cè)驗(yàn),"她說。"我不僅要回去檢查他們的成績(jī),還要回復(fù)50個(gè)給我發(fā)郵件擔(dān)心成績(jī)的學(xué)生。"
Beamish-Brown女士說,她已經(jīng)開始向?qū)W生隱瞞成績(jī),直到她可以審查所有的答案。當(dāng)自動(dòng)評(píng)分器標(biāo)出一些錯(cuò)誤時(shí),她發(fā)現(xiàn)自己要讀三四遍答案才能確定。
她說:"我開始懷疑自己,因?yàn)闄C(jī)器說那是錯(cuò)的。""這就是科技讓我們的生活變得更輕松。"