一種深度神經網絡的分布式訓練方法 | |
所屬分類:技術論文 | |
上傳者:zhoubin333 | |
文檔大小:3555 K | |
標簽: 深度神經網絡 分布式訓練 監督學習 | |
所需積分:0分積分不夠怎么辦? | |
文檔介紹:深度神經網絡在高維數據的分類和預測中取得了巨大成功。訓練深度神經網絡是數據密集型的任務,需從多個數據源收集大規模的數據。這些數據中通常包含敏感信息時,使得深度神經網絡的訓練過程容易泄露數據隱私。針對訓練過程中的數據隱私和通信代價問題,提出了一種深度神經網絡的分布式訓練方法,允許基于多個數據源共同訓練深度神經網絡。首先,提出了分布式訓練架構,由1個計算中心和多個代理組成。其次,提出了基于多代理的分布式訓練算法,允許代理在數據不出本地和減少通信代價的情況下,通過切割深度神經網絡,實現分布式地共同訓練模型。然后,分析了算法的正確性。最后,實驗結果表明該方法是有效的。 | |
現在下載 | |
VIP會員,AET專家下載不扣分;重復下載不扣分,本人上傳資源不扣分。 |
Copyright ? 2005-2024 華北計算機系統工程研究所版權所有 京ICP備10017138號-2