AI性別歧視有救,MIT研究人員給出減少AI預(yù)測偏差新方法
在社交媒體的應(yīng)用場景中,人工智能算法模型的偏差導(dǎo)致搜索結(jié)果或用戶體驗不佳常常出現(xiàn),甚至可以說是無法規(guī)避,如人們熟知的大數(shù)據(jù)殺熟等。可以預(yù)見,當(dāng)AI應(yīng)用到醫(yī)療保健、自動駕駛汽車、刑事司法或刑事處理等場景中時,更多關(guān)乎生命、公平、道德等的問題將會出現(xiàn)。此前,亞馬遜用AI招聘出現(xiàn)了性別歧視問題就是有力的證明。
本文引用地址:http://butianyuan.cn/article/201811/394569.htm在世界每一個角落部署AI,這可能導(dǎo)致持續(xù)的系統(tǒng)性歧視,為此MIT計算機科學(xué)人工智能實驗室(CSAIL)研究人員創(chuàng)造了一種減少AI偏差,同時又不降低預(yù)測結(jié)果準確性的方法。
據(jù)麻省理工學(xué)院教授DavidSontag所言,傳統(tǒng)方法可能建議將與多數(shù)人群相關(guān)的數(shù)據(jù)集隨機化,作為解決不同人群不平等結(jié)果的一種方法,但這種方會權(quán)衡較低的預(yù)測準確性,以實現(xiàn)所有人群的公平性,關(guān)鍵是從代表性不足的群體中挖掘更多數(shù)據(jù)。例如,研究人員發(fā)現(xiàn),在一個案例中,AI模型將女性標記為低收入,男性標記為高收入,這是有失客觀性的,因此他們通過將數(shù)據(jù)集中女性的代表性提高10倍,達到了將不準確結(jié)果的數(shù)量減少了40%的效果。
Sontag在一份聲明中給出這一設(shè)計的簡單解釋:“我們認為這是一個工具箱,可幫助機器學(xué)習(xí)工程師弄清楚他們的數(shù)據(jù)要問什么問題,以便診斷他們的系統(tǒng)為什么會做出不公平的預(yù)測。”
他進一步解釋說:“在這項工作中,我們認為預(yù)測的公平性應(yīng)該在數(shù)據(jù)的背景下進行評估,并且樣本量不足或未測量的預(yù)測變量引起的不公平性應(yīng)該通過數(shù)據(jù)收集來解決,而不是通過約束模型來解決?!?/p>
誠然,預(yù)測準確性的差異往往歸因于數(shù)據(jù)缺乏或不可測量的變量因素,因此該研究團隊建議在進行公平標準評論之前,對模型偏差,模型方差和結(jié)果噪聲進行AI模型分析。
對于這一研究的成本,Sontag表示,“這揭示并分離了數(shù)據(jù)收集不足和模型選擇對公平性的不利影響。為了追求公平,其成本也要納入到數(shù)據(jù)收集和模型開發(fā)的投資。但在某些十分重要的應(yīng)用程序中,其好處往往超過成本?!?/p>
在Sontag與其博士團隊一起撰寫的論文中,有這一方法的詳細解釋。據(jù)悉,該成果將于下個月在蒙特利爾的神經(jīng)信息處理系統(tǒng)(NIPS)上公布。
評論