聯(lián)合學(xué)習(xí)如何塑造人工智能的未來

您可能沒有注意到，最近幾個月，世界上最流行的兩個機器學(xué)習(xí)框架——TensorFlow和PyTorch——已經(jīng)采取了一些措施，采用了包含聯(lián)邦學(xué)習(xí)的解決方案來保護隱私。

聯(lián)邦學(xué)習(xí)不是從用戶那里收集云中的數(shù)據(jù)來訓(xùn)練數(shù)據(jù)集，而是大批量地訓(xùn)練移動設(shè)備上的人工智能模型，然后將這些知識傳輸回一個全球模型，而不需要數(shù)據(jù)離開設(shè)備。

上個月，作為頗受歡迎的Facebook深度學(xué)習(xí)框架PyTorch的最新版本的一部分，該公司的人工智能研究小組推出了outSecure和Private AI，這是一個免費的Udacity課程，為期兩個月，內(nèi)容涉及使用加密計算、差別隱私和聯(lián)邦學(xué)習(xí)等方法。第一堂課從上周開始，由谷歌旗下DeepMind的資深研究科學(xué)家安德魯·特拉斯克(Andrew Trask)教授。他也是Openmined的領(lǐng)導(dǎo)人，這是一個專注于隱私的開源AI社區(qū)，在3月份發(fā)布了PySyft，將PyTorch和聯(lián)邦學(xué)習(xí)結(jié)合在一起。

PyTorch創(chuàng)始人Soumith Chintala在接受VentureBeat采訪時表示:“不僅僅是Facebook，我認(rèn)為整個人工智能領(lǐng)域都在認(rèn)真考慮這個方向。”“是的，我認(rèn)為你絕對會看到更多的努力，更多的方向，(和)更多的包裹，在PyTorch和其他方面，在這個方向上是肯定的。”

隨著隱私成為一個賣點，聯(lián)邦學(xué)習(xí)在科技巨頭和需要隱私保護的行業(yè)(比如醫(yī)療行業(yè))中越來越受歡迎。

據(jù)arXiv稱，谷歌人工智能研究人員在2017年首次引入了聯(lián)邦學(xué)習(xí)，自那以后，研究人員引用了300多次。今年3月，谷歌發(fā)布了TensorFlow Federated，利用其流行的機器學(xué)習(xí)框架簡化聯(lián)邦學(xué)習(xí)。

谷歌I / O會議2019年5月,CEO Sundar Pichai談到聯(lián)合學(xué)習(xí)他向世界的一部分,谷歌重視隱私,與谷歌地圖功能,如隱身模式和使用Android手機的安全關(guān)鍵兩步驗證。隨著設(shè)備上機器學(xué)習(xí)速度的提高，谷歌Assistant在未來幾個月的速度將提高10倍。

早在2017年，安卓設(shè)備鍵盤Gboard就開始使用聯(lián)邦學(xué)習(xí)，從用戶那里學(xué)習(xí)新單詞，并預(yù)測下一個要使用的單詞或表情符號。

皮查伊在2019年的主題演講中說:“現(xiàn)在還為時過早，但我們對更多產(chǎn)品實現(xiàn)聯(lián)合學(xué)習(xí)的進展和潛力感到興奮。”

上圖:在谷歌I/O主題演講期間共享的聯(lián)邦學(xué)習(xí)描述

谷歌的賬戶安全主管Mark Risher在最近的一次電話采訪中告訴VentureBeat AI的作家Kyle Wiggers，除了給Android用戶一個更智能的鍵盤，谷歌還在探索使用聯(lián)邦學(xué)習(xí)來提高安全性。聯(lián)合學(xué)習(xí)將使惡意的第三方能夠針對設(shè)備上的反釣魚安全模型進行測試，所以它在安全方面還不是很合適，但是他們正在朝著這個目標(biāo)努力，Risher說。

然而，聯(lián)邦學(xué)習(xí)仍然面臨挑戰(zhàn)，包括無法檢查訓(xùn)練示例、帶寬問題和WiFi連接的需要，以及無法從用戶交互中自然地推斷標(biāo)記。

谷歌人工智能研究員布倫丹·麥克馬漢在2018年的一次演示中表示，設(shè)備發(fā)送的更新仍然可能包含一些個人數(shù)據(jù)或告訴你關(guān)于一個人的信息，因此不同的隱私被用來給設(shè)備共享的數(shù)據(jù)添加高斯噪聲。