www.久久久久|狼友网站av天堂|精品国产无码a片|一级av色欲av|91在线播放视频|亚洲无码主播在线|国产精品草久在线|明星AV网站在线|污污内射久久一区|婷婷综合视频网站

當前位置:首頁 > 智能硬件 > 人工智能AI
[導讀] 3月19日,英特爾宣布將與高性能廠商Cray在美國能源部下屬的阿貢國家實驗室建造第一臺每秒可進行百億億次浮點運算(exaflop)的超級計算機,專門為傳統(tǒng)高性能計算和人工智能(AI)設計。

3月19日,英特爾宣布將與高性能廠商Cray在美國能源部下屬的阿貢國家實驗室建造第一臺每秒可進行百億億次浮點運算(exaflop)的超級計算機,專門為傳統(tǒng)高性能計算和人工智能(AI)設計。

而就在一周前的3月12日,英偉達宣布69億美元收購以色列公司Mellanox,后者是一家以高性能計算和網絡技術而聞名的芯片制造商,英偉達通過此次收購意在搶占數據中心。

不僅英特爾、英偉達這些科技巨頭在布局超算,人工智能創(chuàng)企也紛紛打造超算。商湯超算平臺的計算集群已搭載超過14000塊GPU,峰值計算達16億億次/秒,而國家“太湖之光”的峰值計算僅為12.5億億次/秒。

去年曠視宣布完成C輪融資時,創(chuàng)始人印奇也對媒體表示:曠視已經在中國好幾個地方建了非常大的超算平臺,未來的算力還需要更多。算力就像當年的存儲一樣,無論擴展得多快,都會被消耗掉,需要不斷去投入。

其實,這些人工智能公司完全可以采用云服務的模式,比如租賃阿里云、騰訊云、AWS、中科曙光等共有云平臺的高性能計算服務。那么它們?yōu)楹渭娂娺x擇自建超算呢?

算法迭代快

計算力和算法是一組最佳CP,如果計算力和算法均是自己研發(fā)的,就會產生1+1大于2的“化學反應”。因為原創(chuàng)算法和算力兩者采用統(tǒng)一的接口時,更易于互相匹配和協(xié)調。且數據的收集、標注、模型建立、模型訓練到輸出SDK的每一個環(huán)節(jié),都可以做到標準化和自動化,整個鏈條就會跑得更快,算法迭代速度更快。而公有云的超算很難滿足每個企業(yè)算法的匹配。

尤其在面臨新需求下的情況,比如需要1000個GPU卡聯合訓練,阿里云、騰訊云等這些云平臺均沒有此類服務,那么新需求就沒法進行下去。從長遠來看,自建超算更利于探索新業(yè)務。

前不久,央視315爆出AI客服一年打40多億個騷擾電話,以及犯罪分子通過免費公共WIFI竊取用戶消費信息的現象引起熱議,其背后正是我國數據安全保護薄弱的影射。如果通過公有云平臺做模型訓練,理論上云平臺都可以看到使用方數據。一旦數據被泄露,對使用方公司將是不可逆的打擊。

眼下,5G商用逐步臨近,5G 時代生產方式將發(fā)生革命性的變化,很多終端數據處理都可在云端跑。這也是英特爾、英偉達等巨頭企業(yè)近期極力打造超算平臺的原因之一,因為超算是5G時代巨頭爭霸不可忽視的一面。

冰凍三尺非一日之寒,構建超算不單是將幾千或者幾萬個GPU堆疊起來,還需要一套強大的“管理系統(tǒng)”——就像微軟Windows操作系統(tǒng)。例如阿里耗費多年打造出“盤古分布式系統(tǒng)”,才成為阿里云的Windows。所以,對于人工智能公司,提前積累超算的經驗十分必要。

從資本角度來看,在5G大爆發(fā)的行業(yè)環(huán)境下,超算的價值愈加凸顯,自建超算有更大的想象空間。在滿足自身計算需求情況下,還可以租賃出去把服務賣給中小企業(yè),或許還能盈利,也是一種商業(yè)模式。

價格便宜10倍

以阿里云平臺為例,筆者粗略算了一筆賬:

如果在阿里云平臺選擇一塊卡,包括8個Intel Platinum 8163處理器和1個NVIDIA V100,服務價格為每7620元/月,即9.144萬元/年。

阿里云平臺的1張卡包月服務(點擊查看大圖)

一個以上配置的卡成本多少呢?筆者查閱發(fā)現,Intel PlaTInum 8163處理器的價格為1.5萬元/個,NVIDIA V100的價格為7.88萬元/個。所以1.5W*8+7.88*1=19.88萬元,再加上服務器(包括主板等硬件)0.5萬元左右,成本共計20.38萬元。

對比發(fā)現,選擇阿里云包月服務所需要的錢大約兩年就可以買一張卡,但一張卡的壽命遠大于兩年,一般至少5-10年。顯然,自己組裝卡是更省錢的。

一位MISSION.ORG的作者Jeff Chen也對比過自建GPU計算機和租賃AWS云服務,竟然便宜10倍!

他組裝一臺GPU計算機,花了3千美元,其配置包括一個1080TI GPU(你也可以用新的2080TI來學習機器,只要再多花500美元),一個12核CPU,64GB RAM和1TB M.2 SSD。再加三個GPU,總共四個GPU。

我們非常保守地假設,因為GPU迭代非常快,一塊用于深度學習的GPU在三年內價值變成0。如下表所示,如果用它超過1年,把電費算在內也會便宜10倍,如果把亞馬遜一次購買多年的折扣算在內,1年大概會便宜6倍,3年便宜4倍。4個GPU便宜21倍。

自建計算機和從AWS租賃的費用比較。1個GPU版本便宜4-10倍,4個GPU版本便宜9-21倍,具體取決于利用率。AWS定價包括全年和3年租賃的折扣(35%,60%)。假設功耗為0.20美元/kWh,1臺GPU機器消耗1千瓦/小時,4臺GPU機器消耗2千瓦/小時。折舊保守估計為3年內的線性損耗。每個GPU 700美元。

如果你想把2080TI用于你的深度學習計算機,會多出500美元,而且對于1 GPU的機器來說,仍然是4-9倍的便宜。

造成這種巨大成本差異的原因是亞馬遜Web服務EC2(或谷歌云或Microsoft Azure)的GPU價格為3美元/小時或約2100美元/月。即使當你關閉你的機器時,你仍然需要以每月每GB 0.10美元的價格為機器支付存儲費用。

對于一臺3千美元的GPU機器學習計算機(1千瓦/小時),如果你經常使用,將在2個月內收支平衡。更不用說你的電腦還歸你所有,而且在兩個月內它沒有貶值多少。同樣,4 GPU版本(2千瓦/小時)的更為有利,因為你將在不到1個月內實現收支平衡。(假設電力成本為0.20美元/kWh)

而且GPU性能與AWS相當。與使用下一代Volta技術的Nvidia v100 GPU相比,你的700美元Nvidia 1080 ti的運行速度為其90%。這是因為存在IO,所以即使V100理論上速度可能快1.5–2倍,IO在實踐中也會減慢速度。由于您使用的是M.2SSD,IO在您自己的計算機上運行得很快。

結語

從1塊卡到幾萬卡還需要運維費用,以及人才成本,但從長遠看,自建超算更有發(fā)展?jié)摿?,也是AI公司做大的必經之路。

當然,選擇共有云平臺還是自建超算也要根據自身公司體量,畢竟打造超算前期投入較大。

人工智能的核心業(yè)務壁壘和競爭力就是算法中的業(yè)務邏輯,還有就是數據。如果核心業(yè)務已經穩(wěn)健,數據和算法需要信息安全保護,則需要從公有云平臺遷移至自建超算。

如果只是小范圍驗證業(yè)務模式,為了降低成本,可以借助公有云平臺快速部署和按需租用的優(yōu)勢,如果資金和時間都充裕,可以直接自建超算。

本站聲明: 本文章由作者或相關機構授權發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內容真實性等。需要轉載請聯系該專欄作者,如若文章內容侵犯您的權益,請及時聯系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或將催生出更大的獨角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數字化轉型技術解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關鍵字: AWS AN BSP 數字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術公司SODA.Auto推出其旗艦產品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關鍵字: 汽車 人工智能 智能驅動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務能7×24不間斷運行,同時企業(yè)卻面臨越來越多業(yè)務中斷的風險,如企業(yè)系統(tǒng)復雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務連續(xù)性,提升韌性,成...

關鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據媒體報道,騰訊和網易近期正在縮減他們對日本游戲市場的投資。

關鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數據產業(yè)博覽會開幕式在貴陽舉行,華為董事、質量流程IT總裁陶景文發(fā)表了演講。

關鍵字: 華為 12nm EDA 半導體

8月28日消息,在2024中國國際大數據產業(yè)博覽會上,華為常務董事、華為云CEO張平安發(fā)表演講稱,數字世界的話語權最終是由生態(tài)的繁榮決定的。

關鍵字: 華為 12nm 手機 衛(wèi)星通信

要點: 有效應對環(huán)境變化,經營業(yè)績穩(wěn)中有升 落實提質增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務引領增長 以科技創(chuàng)新為引領,提升企業(yè)核心競爭力 堅持高質量發(fā)展策略,塑強核心競爭優(yōu)勢...

關鍵字: 通信 BSP 電信運營商 數字經濟

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術學會聯合牽頭組建的NVI技術創(chuàng)新聯盟在BIRTV2024超高清全產業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現場 NVI技術創(chuàng)新聯...

關鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯合招商會上,軟通動力信息技術(集團)股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關鍵字: BSP 信息技術
關閉
關閉