美國時間2月22日,百度硅谷人工智能實驗室(SVAIL)宣佈向深度學習領域開源了Ring Allreduce算法庫。Ring Allreduce是高性能計算領域的著名算法,但在深度學習領域還應用不足。
用通俗的語言來解釋Ring Allreduce算法,就是以前都是向單個處理器發送數據,一個一個很慢,而Ring Allreduce算法是同時發送,這樣發送時間就大大減少,效率也提高了。
這是普通算法:
這是Ring Allreduce算法:
據瞭解,運用Ring Allreduce算法,百度硅谷人工智能實驗室將神經網絡的訓練擴展至40個GPU並且訓練速度提高31倍。
百度稱:“我們推出這個項目最大的願望,就是希望通過開放和分享百度在分佈式深度機器學習及大數據領域的技術經驗,將分佈式機器學習的門檻降低,使得更多個人和機構能夠享受大數據帶來的便利。”
百度認為,互聯網精神的本質,就是共享。技術的研發和進步不只是一家公司的盈利,而是全人類的獲益。我們通過開源提供的更多技術支持,是希望大家一起推動人工智能的發展,造福的是我,是你,也是他。
相關推薦
'人工智能算法是如何從數據中學習規律的'
"⾸先我們來看⼀下最常⻅的⼈⼯智能算法是什麼樣的:⼈⼯智能算法包括⼏個部分: x是模型的輸⼊,y是模型的輸出,模型就是對輸⼊轉化為輸出的計算。⽐如輸⼊x可以是⼀張圖⽚(如 貓的照⽚),模型對圖⽚進⾏計算處理,然後輸出這張圖⽚上對應的物品的類別(貓)。 我們可以把算法理解成⼀...
'解讀人工智能、大數據和雲計算的關係,大佬們的AI賭局竟都輸了?'
"導讀:人工智能(Artificial Intelligence,AI)、大數據(Big Data)和雲計算(Cloud Computing)是當前最受關注的技術,業內常常取這三個技術英文名的首字母將其合稱為ABC。最近10年,資本和媒體對這三種技術的熱度按時間排序依次為:...
'人工智能、大數據和雲計算的關係,終於有人講明白了'
"導讀:人工智能(Artificial Intelligence,AI)、大數據(Big Data)和雲計算(Cloud Computing)是當前最受關注的技術,業內常常取這三個技術英文名的首字母將其合稱為ABC。最近10年,資本和媒體對這三種技術的熱度按時間排序依次為:...
'人工智能算法預測雙色球2019101期10注號碼'
"人工智能算法預測雙色球2019100期10注號碼中了二注4+0和1+1其它號碼比較接近!人工智能算法預測雙色球2019101期10注號碼如下,僅供大家參考,希望大家理性對待!02 11 14 16 20 25+0809 16 20 22 24 30+0805 07 12 ...
'百度崑崙雲服務器,算力提升近30%,中國人工智能未來走向如何?'
"8月29日,百度在2019年世界人工智能大會上發佈了針對雲端場景的百度崑崙服務器。百度崑崙服務器採用百度自研的雲端AI芯片,算力性能超目前最新基於FPGA加速的AI芯片近30倍,而且還兼容唯一中國自主產權的百度飛槳(PaddlePaddle)深度學習框架。近些年,百度一直...
'人工智能算法預測雙色球2019096期10注號碼'
"人工智能算法預測雙色球2019095期10注號碼中了一注2+1,繼續預測!人工智能算法預測雙色球2019096期10注號碼如下,僅供大家參考,希望大家理性對待!15 17 18 19 21 27+1201 03 09 17 19 26+0801 04 07 09 29 3...
'人工智能算法預測雙色球2019094期10注號碼'
"人工智能算法預測雙色球2019093期10注號碼中了一注3+1,繼續預測!人工智能算法預測雙色球2019094期10注號碼如下,供大家參考!15 17 19 21 29 32+0106 12 13 15 17 29+1401 19 22 26 31 33+1301 13 ...
推薦中...