0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

機器偏見來自人的偏見 通過進行算法審計并始終保持透明度就可遠離偏見

iotmag ? 2018-02-08 10:10 ? 次閱讀

人們都曾看過機器控制了世界而人類被毀滅的電影。好在這些電影是娛樂性的,而且人們都認為這些場景是不會發(fā)生的。然而,一個更應該關注的現(xiàn)實問題是:算法偏見。

算法偏見帶來的問題

所謂“算法偏見”是指在在看似沒有惡意的程序設計中帶著創(chuàng)建者的偏見,或者所采用的數(shù)據(jù)是帶有偏見的。結果當然是帶來了各種問題,例如,被曲解的谷歌搜索,合格的候選人被禁止進入醫(yī)學院,聊天機器人在推特上發(fā)布種族主義和性別歧視信息等。

算法偏見造成的最棘手的問題是,從事編程工程師即使主觀上沒有種族主義、性別歧視、年齡歧視等傾向,也有可能造成偏見。人工智能(AI,Artificial Intelligence)本質上就是為了自學而設計的,有時它的確會出錯。當然,人們可以在事后做出調整,但最好的解決辦法是一開始就防止它發(fā)生。那么,怎樣才能讓人工智能遠離偏見呢?

具有諷刺意味的是人工智能最令人興奮的可能性之一就是能夠搭建一個沒有人類偏見的世界。比如當涉及到招聘時,一種算法可以讓男性和女性在申請同一份工作時獲得平等的待遇,或者在警務工作中防止發(fā)生種族偏見。

不管人們是否意識到,人類創(chuàng)造的機器確實反映了人們怎樣是看待世界的,因此也會有類似的刻板印象和世界觀。由于人工智能越來越深入到生活中,人類必須重視它。

偏見的分類

人工智能面臨的另外一個挑戰(zhàn)是,偏見不是以一種形式出現(xiàn)的,而是有各種類型的。這包括交互偏見、潛意識偏見、選擇偏見、數(shù)據(jù)驅動的偏見和確認偏見。

“交互偏見”是指用戶由于自己與算法的交互方式而使算法產(chǎn)生的偏見。當機器被設置向周圍環(huán)境學習時,它們不能決定要保留或者丟棄哪些數(shù)據(jù),什么是對的,什么是錯的。相反,它們只能使用提供給它們的數(shù)據(jù)——不論是好的、壞的,還是丑的,并在此基礎上做出決策。前面提到的聊天機器人Tay便是這類偏見的一個例子。它是受到一個網(wǎng)絡聊天社區(qū)的影響而變得偏種族主義了。

“潛意識偏見”是指算法錯誤地把觀念與種族和性別等因素聯(lián)系起來。例如,當搜索一名醫(yī)生的圖像時,人工智能會把男性醫(yī)生的圖像呈現(xiàn)給一名女性,或者在搜索護士時反過來操作。

“選擇偏見”是指用于訓練算法的數(shù)據(jù)被傾向性地用于表示一個群體或者分組,從而使該算法對這些群體有利,而代價是犧牲其他群體。以招聘為例,如果人工智能被訓練成只識別男性的簡歷,那么女性求職者在申請過程中就很難成功。

“數(shù)據(jù)驅動的偏見”是指用來訓練算法的原始數(shù)據(jù)已經(jīng)存在偏見了。機器就像孩子一樣:他們不會質疑所給出的數(shù)據(jù),而只是尋找其中的模式。如果數(shù)據(jù)在一開始就被曲解,那么其輸出的結果也將反映出這一點。

最后一類是“確認偏見”,這類似于數(shù)據(jù)驅動的偏見,偏向于那些先入為主的信息。它影響人們怎樣收集信息,以及人們怎樣解讀信息。例如,如果自己覺得8月份出生的人比其他時候出生的更富有創(chuàng)造性,那就會偏向于尋找強化這種想法的數(shù)據(jù)。

當我們了解到這么多偏見的例子滲入到人工智能系統(tǒng)時,似乎會引起我們的擔憂。但重要的是要認清事實,記住這個世界本身就是有偏見的,因此,在某些情況下,人們對從人工智能中得到的結果并不奇怪。然而,并不應該如此,人們需要一個對人工智能算法和系統(tǒng)進行測試和驗證的過程,以便在開發(fā)期間和部署之前及早發(fā)現(xiàn)偏見。

人工智能算法及系統(tǒng)的測試與驗證

與人類不同,算法不能撒謊,因此,如果結果是有偏見的,那一定有原因:和它得到的數(shù)據(jù)有關。人類可以撒謊去解釋不雇傭某人的原因,但人工智能不能。而采用算法,就有可能知道什么時候會出現(xiàn)偏見,并對其進行調整,以便將來能克服這些問題。

人工智能會學習,也會犯錯。通常情況下,只有在實際環(huán)境中使用算法后才能發(fā)現(xiàn)任何內在的偏見,因為這些偏見在實踐中被放大了。不應把算法看成是一種威脅,而是解決任何偏見問題的好機會,并能在必要的時候加以糾正。

可以通過開發(fā)系統(tǒng)來發(fā)現(xiàn)有偏見的決策,并及時采取措施。與人類相比,人工智能特別適合采用貝葉斯(Bayesian)方法來確定某種假設的概率,從而消除所有人類偏見的可能性。這比較復雜,但是可行的,特別是考慮到人工智能的重要性(在以后幾年里只會越來越重要)。

隨著人工智能系統(tǒng)的建立和部署,非常重要的一點是必須理解它們是怎樣工作的,只有這樣才能通過設計讓它們具有意識,避免將來出現(xiàn)偏見問題。不要忘記,盡管人工智能發(fā)展非常迅速,但仍處于起步階段,還有很多值得學習和改進的地方。這種調整會持續(xù)一段時間,在此期間,人工智能會變得更聰明,將有越來越多的方法來克服偏見等問題。

技術行業(yè)總是在質疑機器是怎樣工作的,為什么這樣工作。雖然大部分人工智能是在黑盒中運作的,決策過程是隱藏的,但人工智能的透明度是建立信任和避免誤解的關鍵。

目前有很多研究都在進行幫助鑒別偏見的產(chǎn)生,例如Fraunhofer Heinrich Hertz研究所開展的工作。他們正在研究識別不同類型的偏見,例如前面提到的偏見,還有一些更“低級”的偏見,以及人工智能訓練和發(fā)展過程中可能出現(xiàn)的問題。

另外還需要考慮的是無監(jiān)督訓練。目前大多數(shù)人工智能模型是通過有監(jiān)督訓練生成的:采集的是明顯帶有人類選擇的標簽數(shù)據(jù)。而對于無監(jiān)督訓練,使用不具任何標簽的數(shù)據(jù),算法必須要通過自己對數(shù)據(jù)進行分類、識別和匯集。雖然這種方法通常比有監(jiān)督學習慢很多數(shù)量級,但這種方法限制了人的參與,因此,能夠消除任何有意識或者無意識的人為偏見,從而避免對數(shù)據(jù)產(chǎn)生影響。

在底層也有很多事情可以改進。在開發(fā)新產(chǎn)品、網(wǎng)站或者功能時,技術公司需要各方面的人員。多樣性會給算法提供各種各樣的數(shù)據(jù),而這些數(shù)據(jù)也是有偏見的。如果能有一些人去分析輸出結果,那么發(fā)現(xiàn)偏見的可能性會更高。

此外,還可以發(fā)揮算法審計的作用。2016年,卡耐基梅隆研究小組在網(wǎng)絡招聘廣告中發(fā)現(xiàn)了算法偏見。當他們列出了在網(wǎng)上尋找工作的人員后,谷歌廣告顯示,男性在高收入工作中所占比例是女性的近六倍。該小組的結論是,進行內部審計將有助于減少這類偏見。

結論

總之,機器偏見來自人的偏見。人工智能的偏見有多種方式的表現(xiàn),但實際上,它只有一個來源:人類自己。

處理這一問題的關鍵在于技術公司、工程師和開發(fā)人員,他們都應該采取有效的措施來防止無意中創(chuàng)建一種帶有偏見的算法。通過進行算法審計并始終保持透明度,就有信心讓人工智能算法遠離偏見。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 算法
    +關注

    關注

    23

    文章

    4578

    瀏覽量

    92354
  • 人工智能
    +關注

    關注

    1789

    文章

    46375

    瀏覽量

    236579

原文標題:讓人工智能遠離偏見

文章出處:【微信號:iotmag,微信公眾號:iotmag】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    如何實現(xiàn)前面板由透明度0到隱藏透明度100的變化

    如何實現(xiàn)前面板由實體 即透明度0到隱藏透明度100 這一過程的緩慢變化,有動畫效果
    發(fā)表于 12-17 10:21

    本應公平公正的 AI,卻從數(shù)據(jù)中學會了人類的偏見

    。但是透明性是例外,不是規(guī)則。商用應用(我們用來找工作、評信用和貸款等服務)使用的絕大部分AI系統(tǒng)都是專有的,其算法和訓練數(shù)據(jù)是公眾看不到的。所以個人要想質詢機器的決定或者想了解用帶人類偏見
    發(fā)表于 06-02 12:51

    人工智能遭遇的偏見 算法偏見帶來的問題

    偏見是人工智能面臨一個挑戰(zhàn),主要是來自算法偏見,當然偏見并不止這些。與人類不同,算法不能撒謊,那
    發(fā)表于 02-06 14:04 ?1.2w次閱讀

    AI陷入沼澤,算法是潛在偏見的最后解決方案?

    人工智能本來并不存在偏見,它不會因為無法通過邏輯來解釋的理由而“想”某些東西是真的或假的。不幸的是,從創(chuàng)建算法到解釋數(shù)據(jù),機器學習中存在著人類的偏見
    發(fā)表于 04-23 15:56 ?968次閱讀

    谷歌說機器學習還能產(chǎn)生“偏見”?你有偏見嗎?

    機器學習還能產(chǎn)生“偏見”?機器學習也會對數(shù)據(jù)產(chǎn)生偏見,從而導致錯誤的預測。我們該如何解決這一問題? Google的新論文或許會揭曉答案。機器
    的頭像 發(fā)表于 05-14 18:20 ?3349次閱讀
    谷歌說<b class='flag-5'>機器</b>學習還能產(chǎn)生“<b class='flag-5'>偏見</b>”?你有<b class='flag-5'>偏見</b>嗎?

    當你被AI歧視 如何解決這種偏見

    AI的歧視問題也就不是一個簡單的算法問題了。今天我們就再聊一聊AI的偏見問題,以及面對它,我們究竟能做些什么。
    發(fā)表于 06-11 09:16 ?1710次閱讀

    機器解釋自己:避免讓偏見影響機器學習系統(tǒng)

    在我們的生活中,許多重要決策都是由某種系統(tǒng)做出的,很多系統(tǒng)都存在明顯的偏見,無論這系統(tǒng)是、機器還是二者的組合。機器學習在決策制度中的作用越來越大,這為我們提供了一個建立更少
    發(fā)表于 06-23 12:34 ?695次閱讀

    IBM加速人工智能商用 IBM推出云工具檢測AI偏見

    IBM推出了一項軟件服務,可以掃描人工智能系統(tǒng)的工作情況,以便檢測偏見并為正在做出的自動決策提供解釋,一定程度的透明度可能是合規(guī)目的所必需的,而不僅僅是公司自己的盡職調查。 新的信任和透明度系統(tǒng)運行
    的頭像 發(fā)表于 09-22 06:33 ?3128次閱讀

    如何讓人工智能擺脫算法偏見

    人們都曾看過電影里機器控制了世界而人類被毀滅的場景。好在這些電影只是娛樂性的,現(xiàn)實世界是不會發(fā)生的。然而,一個更應該關注的問題是:算法偏見。
    的頭像 發(fā)表于 11-15 14:57 ?3584次閱讀

    人工智能學習人類知識 但同時也能吸收人類的偏見

    人們最初確實天真地以為,算法能比人類更能避免偏見。人工智能學習人類知識,同時也吸收人類偏見。這種擔憂由來已久。但谷歌的一項新發(fā)明極大推進了人工智能從文本材料中學習的速度,也使解決機器
    發(fā)表于 11-26 17:19 ?767次閱讀

    你對人工智能的偏見擔憂嗎?

    隨著人工智能繼續(xù)進軍企業(yè),許多IT專業(yè)人士開始對其使用的系統(tǒng)中可能存在的AI偏見表示擔憂。一份來自DataRobot的最新報告發(fā)現(xiàn),美國和英國近一半的人工智能專業(yè)人士“非?!睋娜斯ぶ悄艿?b class='flag-5'>偏見。
    的頭像 發(fā)表于 01-20 17:35 ?1307次閱讀

    多樣化的團隊可以幫助減少偏見算法

    根據(jù)伯恩霍爾茨的說法,所有數(shù)據(jù)都是有偏見的,因為是人們在收集數(shù)據(jù)。她強調說:“而且我們正在將偏見建立到數(shù)據(jù)科學中,然后將這些工具導出到偏見系統(tǒng)中?!?“你猜怎么著?問題變得越來越嚴重。因此,讓我們停止這樣做?!?/div>
    的頭像 發(fā)表于 04-09 14:44 ?1739次閱讀

    算法和人工智能具有天生的偏見嗎?

    諸如Facebook(我的前雇主),Google和Twitter之類的公司因各種帶有偏見算法而反復受到攻擊。為了應對這些合理的恐懼,他們的領導發(fā)誓要進行內部
    的頭像 發(fā)表于 04-11 10:19 ?1619次閱讀

    如何消除對AI的偏見?

    親自處理AI偏見的人表示自己的偏見已減少。例如,愛立信使用情景規(guī)劃方法來挑戰(zhàn)整個組織的戰(zhàn)略思維,并在戰(zhàn)略制定過程的多個階段測試和篩選偏見(Gartner 在“研發(fā)決策的常見認知偏見”中
    發(fā)表于 08-12 16:28 ?797次閱讀

    人工智能和機器學習中暗含的算法偏見

    在我們的世界里,算法無處不在,偏見也是一樣。從社會媒體新聞的提供到流式媒體服務的推薦到線上購物,計算機算法,尤其是機器學習算法,已經(jīng)滲透到我
    的頭像 發(fā)表于 12-25 19:12 ?600次閱讀