沒有一個(gè)模型能夠達(dá)到100%的準(zhǔn)確度

整個(gè)樣本進(jìn)行培訓(xùn)時(shí)，女性的DFW準(zhǔn)確性較低，而少數(shù)民族學(xué)生人數(shù)較少的DFW準(zhǔn)確性較高，他們有問題地指出，這需要對(duì)人口統(tǒng)計(jì)學(xué)進(jìn)行模型調(diào)整。

人口統(tǒng)計(jì)學(xué)敏感的高風(fēng)險(xiǎn)學(xué)生預(yù)測(cè)模型不勝枚舉。估計(jì)包括佐治亞州立大學(xué)在內(nèi)的1,400所美國(guó)大學(xué)正在使用算法技術(shù)來識(shí)別可能正在苦苦掙扎的學(xué)生，以便他們提供支持，甚至鼓勵(lì)這些學(xué)生改變專業(yè)。但是，盡管在經(jīng)歷了多年的急劇下降之后，全國(guó)畢業(yè)率在2016年又開始回升，但人們擔(dān)心這種算法可能會(huì)加劇歷史上的不平等現(xiàn)象，將低收入的學(xué)生或有色人種的學(xué)生集中到“更容易”和薪水更低的專業(yè)中。

“我們整個(gè)社會(huì)的高等教育都存在歷史偏見，”新美國(guó)智庫(kù)的高等教育高級(jí)顧問艾里斯·帕爾默(Iris Palmer)告訴AMP Reports。“如果我們使用過去的數(shù)據(jù)來預(yù)測(cè)學(xué)生將來的表現(xiàn)，我們是否可以消除這種偏見?將會(huì)發(fā)生的事情是他們會(huì)灰心……這最終將成為那些特殊學(xué)生的自我實(shí)現(xiàn)的預(yù)言。”

在這項(xiàng)最新研究中，當(dāng)將其應(yīng)用于第二個(gè)樣本時(shí)，研究人員發(fā)現(xiàn)隨機(jī)森林的性能稍好(這歸因于將范圍限制為三年零一個(gè)機(jī)構(gòu)，而不是十年零零幾個(gè)機(jī)構(gòu))。他們還發(fā)現(xiàn)，與性別，每周作業(yè)和測(cè)驗(yàn)成績(jī)等課堂數(shù)據(jù)相比，諸如性別，標(biāo)準(zhǔn)化考試成績(jī)，佩爾助學(xué)金資格以及從AP課程獲得的學(xué)時(shí)等制度性變量的重要性要小。經(jīng)過物理課訓(xùn)練的隨機(jī)森林在物理課的第五周之后變得比基于機(jī)構(gòu)數(shù)據(jù)的模型更好，而在大約第八周之后“大大”改善。在這種情況下，制度變量和課堂數(shù)據(jù)結(jié)合起來具有更大的預(yù)測(cè)能力：與僅制度變量的模型相比，

關(guān)于第三個(gè)樣本，研究人員說，對(duì)其進(jìn)行訓(xùn)練的模型比第一個(gè)和第二個(gè)語料庫(kù)的模型具有更低的DFW準(zhǔn)確性和精確度(即，兩次或更多次測(cè)量的接近程度的度量)。研究人員稱，僅預(yù)測(cè)第三樣本中少數(shù)族裔人口分組結(jié)果的模型的性能大約與整體模型的績(jī)效相近。這表明，第一樣本中子分組的績(jī)效差異并不是這些組的低水平的結(jié)果。表示。

研究人員告誡說，沒有一個(gè)模型能夠達(dá)到100%的準(zhǔn)確度，這是由他們對(duì)第一個(gè)樣本的最佳表現(xiàn)模型所證明的(該模型總體上達(dá)到了57%的準(zhǔn)確度，或者僅比偶然性好一點(diǎn))。但是他們斷言機(jī)器學(xué)習(xí)分類代表了物理指導(dǎo)者塑造指導(dǎo)的工具。該研究的共同作者寫道：“如果教師要使用分類算法的預(yù)測(cè)，那么重要的是，這些結(jié)果不要使他或她對(duì)個(gè)別學(xué)生的待遇有偏見。”“機(jī)器學(xué)習(xí)結(jié)果……不應(yīng)被用來將學(xué)生排除在其他教育活動(dòng)之外，以支持處于危險(xiǎn)中的學(xué)生……但是，分類模型的結(jié)果可以被用來鼓勵(lì)最有風(fēng)險(xiǎn)的學(xué)生利用這些機(jī)會(huì)。”