CCF最新分享:數(shù)據(jù)隱私保護下,AI大數(shù)據(jù)應如何發(fā)展?
3月24日,由CCF主辦,微眾銀行及深圳大學微眾金融科技研究院協(xié)辦的“CCFTF14期研討會”在深圳大學舉辦,此次會議的主題為“聯(lián)邦學習技術及數(shù)據(jù)隱私保護”。
隨著國際國內(nèi)數(shù)據(jù)隱私保護成為新趨勢,數(shù)據(jù)共享變得更加困難,如何在保護數(shù)據(jù)隱私前提下開展AI大數(shù)據(jù)研究?“聯(lián)邦學習”可以打破“數(shù)據(jù)孤島”具體應用在AI領域。聚焦“聯(lián)邦學習技術及數(shù)據(jù)隱私保護”,CCFTF 14期研討會邀請國際人工智能學會理事長、微眾銀行首席人工智能官楊強、南洋理工大學于涵教授、微眾銀行人工智能部高級研究員劉洋、京東城市計算事業(yè)部AI平臺部負責人張鈞波、北京觀韜中茂(上海)律師事務所合伙人王渝偉、第四范式聯(lián)合創(chuàng)始人、首席研究科學家陳雨強、微眾銀行人工智能部副總經(jīng)理陳天健與大家現(xiàn)場互動交流。
AI大數(shù)據(jù)面臨挑戰(zhàn),技術向善與遷移學習
我們知道,AI與各行業(yè)緊密結(jié)合,必將顯著改善社會生活,這是一種比較理想的狀態(tài),然而現(xiàn)實是AI系統(tǒng)仍有許多不盡如人意的地方。另外,社會對隱私保護和數(shù)據(jù)安全提出了更高的要求,這也給大數(shù)據(jù)研究及共享提出了新的挑戰(zhàn)。
競爭、安全及數(shù)據(jù)壁壘等因素造成所謂的“數(shù)據(jù)孤島”問題。在此背景下,遷移學習幫助更多領域建模,就像在數(shù)據(jù)集之間建立朋友圈,數(shù)據(jù)孤島問題得到有效解決。
AI向善與系統(tǒng)短板
AI向善,它能在普惠金融、普惠教育、普惠醫(yī)療、智慧城市、災難營救、扶貧及農(nóng)業(yè)等領域發(fā)揮重要作用。
楊強教授表示:“AI向善(AI for good),這在國外很早就被提出來的概念。這個概念不僅僅是計算機領域的發(fā)展,也是社會的需求,最近大家比較關心的一個議題就是AI和社會的結(jié)合。AI作為一種工具,就像以前互聯(lián)網(wǎng)作為一種工具,加上一些傳統(tǒng)的只能少數(shù)人享受的領域,然后通過AI的手段對廣大的社會傳播,能夠讓普通人也能享受過去VIP享受的那一些特殊服務,包括金融,所以這樣就產(chǎn)生了AI和普惠金融;AI和普惠教育,例如大學的高等教育,能不能讓所有人都能享受到。另外還有AI和普惠醫(yī)療、智慧城市、災難營救,AI扶貧和農(nóng)業(yè)等方面!
AI若能與各行業(yè)緊密結(jié)合,必將顯著改善社會生活,這是一種比較理想的狀態(tài),然而現(xiàn)實是AI系統(tǒng)仍有許多不盡如人意的地方,例如AI系統(tǒng)的有偏性和AI系統(tǒng)與人類合作方面的問題。
“AI系統(tǒng)有偏性,根據(jù)我們交給AI系統(tǒng)的數(shù)據(jù),AI系統(tǒng)可以建立模型,但如果這個數(shù)據(jù)是有偏的,那么這個模型就會有偏性。另一個是AI系統(tǒng)和人類合作的問題,最近一個很大的事情是波音飛機自動駕駛系統(tǒng)和人類飛行員搶奪控制權,不幸的是系統(tǒng)贏了,導致飛機墜毀,現(xiàn)在波音飛機停飛。這給我們一個很大的啟示,自動系統(tǒng)如果不能和人類有一個很好的交互,沒有以人為中心的設計,這個系統(tǒng)會是一個災難!睏顝娊淌诒硎尽
遷移學習解決“數(shù)據(jù)孤島”問題
目前,除AI系統(tǒng)自身的一些問題外,重視隱私保護和數(shù)據(jù)安全的新趨勢也給數(shù)據(jù)研究及共享帶來新的挑戰(zhàn)。
近年來,國際國內(nèi)對于隱私保護和數(shù)據(jù)安全的重視已成為重要趨勢。歐盟去年5月通過最新法案《通用數(shù)據(jù)保護條例》(General Data Protection Regulation, GDPR),對數(shù)據(jù)保護采取更嚴格的態(tài)度。同時,我國也在緊跟這些領域的法律和規(guī)范,自2017年《網(wǎng)絡安全法》通過以后,目前我國個人信息保護法已納入立法規(guī)劃,有望在2020年通過,這些都反映出數(shù)據(jù)保護與隱私安全越來越受到重視。
隨著隱私保護和重視數(shù)據(jù)安全成為新趨勢,數(shù)據(jù)研究及共享面臨更多問題。首先,由于競爭關系、安全問題、審批流程等因素,數(shù)據(jù)共享難度高。其次,數(shù)據(jù)在不同擁有方、云和端以及物聯(lián)網(wǎng)節(jié)點之間的流通存在著難以打破的壁壘,形成所謂的“數(shù)據(jù)孤島”問題。此外,即便不同行業(yè)之間有意愿交換數(shù)據(jù),也可能遭遇政策問責和競爭保護,AI的大數(shù)據(jù)面臨重重挑戰(zhàn)。
雖然AI的大數(shù)據(jù)面臨重重挑戰(zhàn),但數(shù)據(jù)孤島并非不可解決!斑w移學習就是很好的解決方案。遷移學習是用一個成熟領域的數(shù)據(jù)和模型,通過知識遷移,幫助完成一個小數(shù)據(jù)建模。這樣通過關聯(lián)領域間的相似性,幫助更多領域建模,這就像在數(shù)據(jù)集之間建立朋友圈,數(shù)據(jù)孤島也能得到有效解決!睏顝娊淌诒硎。
數(shù)據(jù)共享與安全,聯(lián)邦學習的優(yōu)越性
此外,解決數(shù)據(jù)壁壘、“數(shù)據(jù)孤島”等問題的方法除遷移學習外,還有一個重要方法——“聯(lián)邦學習”。
谷歌公司率先提出了基于個人終端設備的“聯(lián)邦學習” (Federated Learning)算法框架。“聯(lián)邦機器學習”(Federated Machine Learning)實際上是一種加密的分布式機器學習技術,參與各方可以在不披露底層數(shù)據(jù)和底層數(shù)據(jù)的加密(混淆)形態(tài)的前提下共建模型。它可以實現(xiàn)各個企業(yè)的自有數(shù)據(jù)不出本地,通過加密機制下的參數(shù)交換方式,就能在不違反數(shù)據(jù)隱私法規(guī)情況下,建立一個虛擬的共有模型。在這樣一個機制下,參與各方的身份和地位相同,成功實現(xiàn)了打通“數(shù)據(jù)孤島”走向“共同發(fā)展”的目標。
聯(lián)邦學習分為橫向聯(lián)邦和縱向聯(lián)邦,橫向聯(lián)邦數(shù)據(jù)方特征維度相同,縱向聯(lián)邦數(shù)據(jù)方樣本ID相同?v向聯(lián)邦學習的目標是A方與B方聯(lián)合建立模型,并且假設只有一方有標簽Y,兩方均不暴露數(shù)據(jù),但可能遇到的挑戰(zhàn)是只有X的一方?jīng)]有辦法建立模型,雙方不能交換共享數(shù)據(jù),最終要達到的預期為雙方俊獲得數(shù)據(jù)保護且模型無損失。
“通過縱向聯(lián)邦學習,各方在隱私保護下進行樣本ID匹配,每個參與方并不知道另一方的數(shù)據(jù)和特征,每個參與方只得到自己的自己側(cè)的模型參數(shù)(半?yún)?shù)),即滿足隱私保護的要求,又滿足數(shù)據(jù)遷移學習的目標。聯(lián)邦學習希望在安全合規(guī)的基礎上達到防御攻擊、提高算法效率的目標!眲⒀蟛┦勘硎尽
基于此,微眾銀行AI團隊提出了基于“聯(lián)邦學習”的系統(tǒng)性的通用解決方案,可以解決個人(to C)和公司間(to B)聯(lián)合建模的問題。此前,微眾銀行在城市管理的視覺應用方面,與極視角聯(lián)合推出了聯(lián)邦視覺項目。
“傳統(tǒng)城市管理面臨標簽數(shù)量少、數(shù)據(jù)分散,集中管理成本很高且模型更新和反饋存在離線延遲情況,聯(lián)邦視覺項目通過聯(lián)邦學習對模型提升率為15%,且模型效果無損失,這是聯(lián)邦學習應用在物聯(lián)網(wǎng)領域的一大優(yōu)勢! 劉洋表示。
物聯(lián)網(wǎng)(IoT)是基于互聯(lián)網(wǎng)、傳統(tǒng)電信網(wǎng)等信息傳輸渠道,讓所有具備通信功能的獨立物體實現(xiàn)互聯(lián)互通的網(wǎng)絡。物聯(lián)網(wǎng)的應用之一,是透過收集多個節(jié)點的小數(shù)據(jù),聚集成大數(shù)據(jù)來建立應用模型。
而邊緣計算(Edge Computing)則致力于通過依靠集網(wǎng)絡、計算、存儲、應用核心能力為一體的開放平臺,就近提供最近端服務,從而產(chǎn)生更快的網(wǎng)絡服務響應,滿足不同行業(yè)的實時業(yè)務需求。
物聯(lián)網(wǎng)、邊緣計算和與人工智能 (AI) 的有機結(jié)合離不開分布式大數(shù)據(jù)的安全、合法的管理,聯(lián)邦學習助力IoT,實現(xiàn)大規(guī)模用戶在保護數(shù)據(jù)隱私下的協(xié)同學習。

請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
推薦專題
- 1 阿里首位程序員,“掃地僧”多隆已離職
- 2 先進算力新選擇 | 2025華為算力場景發(fā)布會暨北京xPN伙伴大會成功舉辦
- 3 宇樹機器人撞人事件的深度剖析:六維力傳感器如何成為人機安全的關鍵屏障
- 4 清華跑出具身智能獨角獸:給機器人安上眼睛和大腦,融資近20億
- 5 特朗普要求英特爾首位華人 CEO 辭職
- 6 踢館大廠和微軟,剖析WPS靈犀的AI實用主義
- 7 騰訊 Q2 財報亮眼:AI 已成第二增長曲線
- 8 谷歌吹響AI沖鋒號,AI還有哪些機會
- 9 蘋果把身家押在Siri上:一場輸不起的自我革命
- 10 共探合作新機遇!江門市新會區(qū)(深圳)“AI + 機器人” 產(chǎn)業(yè)對接會成功舉辦