0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學(xué)習在線(xiàn)課程
  • 觀(guān)看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區
會(huì )員中心
創(chuàng )作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內不再提示

ChatGPT熱潮引發(fā)AI服務(wù)器爆單

Carol Li ? 來(lái)源:電子發(fā)燒友網(wǎng) ? 作者:李彎彎 ? 2023-02-22 01:13 ? 次閱讀
電子發(fā)燒友網(wǎng)報道(文/李彎彎)近日消息,隨著(zhù)ChatGPT的熱潮,華為昇騰AI服務(wù)器、拓維信息兆瀚RA5900-A系列AI訓練服務(wù)器等詢(xún)單量及預定量爆發(fā)式增長(cháng)。

AI服務(wù)器通常搭載GPU、FPGA、ASIC等加速芯片,利用CPU與加速芯片的組合可以滿(mǎn)足高吞吐量互聯(lián)的需求,為自然語(yǔ)言處理、計算機視覺(jué)、機器學(xué)習等AI應用場(chǎng)景提供強大的算力支持,支撐AI算法訓練和推理。

AI服務(wù)器與普通服務(wù)器的區別

服務(wù)器是一種高性能計算機,作為網(wǎng)絡(luò )的節點(diǎn),存儲、處理網(wǎng)絡(luò )上80%的數據、信息,因此也被稱(chēng)為網(wǎng)絡(luò )的靈魂。普通服務(wù)器是以CPU為計算能力的提供者,采用串行架構,擅長(cháng)邏輯計算和浮點(diǎn)計算。由于邏輯判斷需要大量的分支跳轉,使得CPU的結構復雜,計算能力的提高主要靠堆積更多的核心數來(lái)實(shí)現。

在大數據、云計算、人工智能、元宇宙、數據孿生和物聯(lián)網(wǎng)等網(wǎng)絡(luò )技術(shù)的應用中,互聯(lián)網(wǎng)上的數據呈現出幾何倍數的增長(cháng),這對以CPU為主要計算能力來(lái)源的傳統服務(wù)是巨大的考驗。目前,CPU的制程工藝和單個(gè)CPU的核心數接近極限,但數據的增加仍在繼續,因此有必要提高服務(wù)器的數據處理能力。在這種環(huán)境下,AI服務(wù)器應運而生。

AI服務(wù)器與普通服務(wù)器的區別:在服務(wù)器的硬件架構方面,AI服務(wù)器是異構服務(wù)器,可以根據應用范圍采用不同的組合方式,如CPU + GPU、CPU + TPU、CPU + 其他加速卡等。與普通服務(wù)器相比,內存、存儲、網(wǎng)絡(luò )沒(méi)有區別,主要是大數據、云計算、人工智能等方面需要更多的內存,滿(mǎn)足各種數據的收集整理。

普通GPU服務(wù)器一般是單卡或者雙卡,AI服務(wù)器需要承擔大量計算,一般配置四塊以上的GPU卡,甚至搭建一個(gè)AI服務(wù)器集群;AI服務(wù)器需要獨特的設計,由于A(yíng)I服務(wù)器有多個(gè)GPU卡,需要對系統結構、散熱和拓撲進(jìn)行專(zhuān)門(mén)設計,以滿(mǎn)足AI服務(wù)器長(cháng)期穩定運行的要求。

目前市場(chǎng)上的AI服務(wù)器普遍采用CPU + GPU,由于GPU和CPU形式不同所以AI服務(wù)器采用并行計算模式,善于梳理圖形渲染、機器學(xué)習等密集數據操作。在GPU上,NVIDIA優(yōu)勢明顯,GPU單卡核心數可達近千個(gè),如配置16張NVIDIATesla V100 Tensor Core 32GB GPUs核心數可超過(guò)10240個(gè),計算性能高達每秒2千萬(wàn)億次。而且經(jīng)過(guò)近幾年市場(chǎng)的發(fā)展,也證實(shí)了CPU +GPU異構服務(wù)器在當前環(huán)境下確實(shí)有很大的發(fā)展空間。

AI服務(wù)器市場(chǎng)現狀及主要玩家

近幾年,中國市場(chǎng)的AI服務(wù)器出貨量和滲透率都在提升。未來(lái)預計隨著(zhù)AI模型訓練和應用的興起,需要支持AI功能的服務(wù)器將持續增加。IDC預計,中國AI服務(wù)器2021年的市場(chǎng)規模為57億美元,同比增長(cháng)61.6%,到2025年市場(chǎng)規模將增長(cháng)到109億美元,CAGR為17.5%。

根據其此前發(fā)布的《中國加速計算市場(chǎng)(2021年下半年)跟蹤報告》,2021年全年中國AI服務(wù)器市場(chǎng)規模達350.3億元,同比增長(cháng)68.6%。浪潮信息、寧暢、新華三、華為、安擎位居前五,占據了82.6%的市場(chǎng)份額。其中,浪潮AI服務(wù)器市場(chǎng)占有率達52.4%。

近日,浪潮信息在某平臺上表示,公司人工智能服務(wù)器領(lǐng)域的市占率位居全球AI服務(wù)器市場(chǎng)第一,在ChatGPT和AIGC相關(guān)方向上已有布局相關(guān)業(yè)務(wù)。日前消息,淮海智算中心攜手浪潮信息進(jìn)行了超大規模參數AI大模型訓練性能測試,實(shí)測數據表明,千億參數規模的自然語(yǔ)言AI單體大模型在淮海智算中心計算平臺上的訓練算力效率達53.5%,刷新了業(yè)內AI大模型訓練算力效率新高。

寧暢在A(yíng)I服務(wù)器方面已經(jīng)發(fā)布多款產(chǎn)品,比如X620 G50,這是一款基于第四代英特爾至強可擴展處理器的高端2U機架式服務(wù)器??筛鶕I(yè)務(wù)需求對資源進(jìn)行靈活配置,滿(mǎn)足各種各行業(yè)應用需求。完美適用于機器學(xué)習、AI推理、云計算、高性能計算、云存儲、大數據、虛擬化、辦公系統等應用場(chǎng)景。

還有上文提到的拓維信息,早在ChatGPT爆發(fā)之前,就已布局了一系列人工智能產(chǎn)品。該公司表示,旗下兆瀚智能計算產(chǎn)品包括AI推理、AI訓練、AI集群等,具有超強AI算力、更優(yōu)AI能效、最佳AI拓展等產(chǎn)品特點(diǎn),在行業(yè)內有領(lǐng)先優(yōu)勢。

未來(lái),拓維信息將持續重點(diǎn)關(guān)注先進(jìn)計算、人工智能等前沿技術(shù)領(lǐng)域,加大在人工智能產(chǎn)業(yè)的規劃布局及基礎軟硬件產(chǎn)業(yè)投入,充分發(fā)揮自身在人工智能領(lǐng)域的影響力。通過(guò)與華為的全方位深入合作,推出基于昇騰處理器的兆瀚AI產(chǎn)品,努力構筑業(yè)界超強AI算力平臺。

中科曙光在A(yíng)I服務(wù)器上也有布局。據介紹,中科曙光已推出“全浸沒(méi)式液冷AI訓練專(zhuān)用服務(wù)器”,與百度、復旦大學(xué)等企業(yè)及科研院所深度合作,形成了諸多基于A(yíng)I模型的聯(lián)合解決方案,支持了國內多個(gè)千億級以上參數規模的AI大模型訓練,攻克類(lèi)腦智能、基因技術(shù)、自動(dòng)駕駛等多個(gè)前沿領(lǐng)域AI難題。

此外還有中國長(cháng)城、神州數碼、廣電運通等。中國長(cháng)城芯片、整機、服務(wù)器、網(wǎng)絡(luò )交換機、路由器、工業(yè)控制系統、容災備份產(chǎn)品等自主安全產(chǎn)品譜系逐步成為相關(guān)市場(chǎng)的主導產(chǎn)品,AI服務(wù)器已實(shí)現量產(chǎn)。神州數碼之前推出了神州鯤泰人工智能推理服務(wù)器,以“鯤鵬+昇騰”為核心,可提供128個(gè)處理核心的算力,同時(shí)最大可支持8張華為Atlas 300推理卡,提供256GB推理緩存,以及最大704 TOPS INT8的AI算力。

小結

過(guò)去幾年人工智能發(fā)展迅速,作為算力支撐的AI服務(wù)器市場(chǎng)在不斷增加。如今在ChatGPT爆火下,人工智能訓練和推理尋求將持續擴大,預計未來(lái)AI服務(wù)器市場(chǎng)規模將繼續保持高速增長(cháng)趨勢。而在其中布局已久的浪潮、中科曙光、寧暢、拓維信息等無(wú)疑將更具優(yōu)勢。

聲明:本文內容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權轉載。文章觀(guān)點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習之用,如有內容侵權或者其他違規問(wèn)題,請聯(lián)系本站處理。 舉報投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    27203

    瀏覽量

    264961
  • ChatGPT
    +關(guān)注

    關(guān)注

    28

    文章

    1485

    瀏覽量

    5669
收藏 人收藏

    評論

    相關(guān)推薦

    差分晶振在AI服務(wù)器中的應用案例

    隨著(zhù)ChatGPT技術(shù)不斷發(fā)展和應用,我國AI服務(wù)器市場(chǎng)保持較快增速(預計 2023年我國服務(wù)器市場(chǎng)規模將增至308億美元),而AI
    發(fā)表于 06-17 15:15 ?0次下載

    路高性能服務(wù)器主板

    服務(wù)器
    jf_10805031
    發(fā)布于 :2024年04月26日 14:23:58

    在FPGA設計中是否可以應用ChatGPT生成想要的程序呢

    當下AI人工智能崛起,很多開(kāi)發(fā)領(lǐng)域都可看到ChatGPT的身影,FPGA設計中,是否也可以用ChatGPT輔助設計呢?
    發(fā)表于 03-28 23:41

    服務(wù)器遠程不上服務(wù)器怎么辦?服務(wù)器無(wú)法遠程的原因是什么?

    產(chǎn)生問(wèn)題的原因,檢查硬盤(pán)和服務(wù)器系統。通過(guò)日志和檢查數據來(lái)確認問(wèn)題出 現的原因以及如何解決。 三、端口問(wèn)題 1.端口錯誤 找回正確的端口或更換遠程端口 2.端口被掃 更改端口,并在防火墻禁止掃的IP
    發(fā)表于 02-27 16:21

    linux服務(wù)器和windows服務(wù)器

    Linux服務(wù)器和Windows服務(wù)器是目前應用最廣泛的兩種服務(wù)器操作系統。兩者各有優(yōu)劣,也適用于不同的應用場(chǎng)景。本文將 對Linux服務(wù)器和Windows
    發(fā)表于 02-22 15:46

    GPU交期緩解,AI服務(wù)器廠(chǎng)商營(yíng)收暴漲

    電子發(fā)燒友網(wǎng)報道(文/周凱揚)AIGC在應用軟件掀起的這股熱潮背后,卻隱藏著(zhù)AI服務(wù)器組件缺貨的難題。在云服務(wù)廠(chǎng)商和互聯(lián)網(wǎng)廠(chǎng)商大肆采購AI
    的頭像 發(fā)表于 02-20 00:17 ?2373次閱讀
    GPU交期緩解,<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>廠(chǎng)商營(yíng)收暴漲

    【國產(chǎn)FPGA+OMAPL138開(kāi)發(fā)板體驗】(原創(chuàng ))6.FPGA連接ChatGPT 4

    訪(fǎng)問(wèn)ChatGPT 4這樣的AI模型是非常復雜的,因為這涉及到大量的數據傳輸、協(xié)議實(shí)現、并行處理、優(yōu)化等等。更重要的是,ChatGPT 4這樣的模型通常是運行在強大的服務(wù)器集群上。不過(guò)
    發(fā)表于 02-14 21:58

    AI服務(wù)器簡(jiǎn)介及晶振應用

    AI服務(wù)器,是一種專(zhuān)門(mén)用于處理人工智能相關(guān)任務(wù)的高性能計算機。它具備強大的計算能力和存儲能力,能夠快速處理大量的數據和復雜的算法。與傳統的計算設備相比,AI服務(wù)器具有更高的計算效率和更
    的頭像 發(fā)表于 12-25 10:45 ?618次閱讀
    <b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>簡(jiǎn)介及晶振應用

    YXC晶振解決方案AI服務(wù)器中的應用

    AI服務(wù)器常用頻點(diǎn):50MHZ、125MHZ、156.25MHZ,適用于AI服務(wù)器的YXC差分晶振
    的頭像 發(fā)表于 12-18 18:06 ?243次閱讀
    YXC晶振解決方案<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>中的應用

    #人工智能 #安卓主板 #AI算力主板 #安卓AI主板 #AI算力服務(wù)器 #陣列服務(wù)器為您提供一站式解決方案

    服務(wù)器AI人工智能
    儀器設備李先生
    發(fā)布于 :2023年10月20日 17:29:59

    AI熱與GPU缺貨持續至明年,服務(wù)器公司有人歡喜有人愁

    電子發(fā)燒友網(wǎng)報道(文/周凱揚)在ChatGPT以及同類(lèi)生成式AI應用持續高漲的熱度下,不少服務(wù)器公司今年都收獲了遠超以往的AI服務(wù)器訂單,也
    的頭像 發(fā)表于 09-22 00:20 ?1422次閱讀
    <b class='flag-5'>AI</b>熱與GPU缺貨持續至明年,<b class='flag-5'>服務(wù)器</b>公司有人歡喜有人愁

    2023年AI服務(wù)器全球規模將達248億美元 中國網(wǎng)絡(luò )四巨頭向英偉達下50億美元訂單

    2023年,以 ChatGPT 為代表的生成式 AI 應用引發(fā)新一輪算力需求。根據 IDC 數據,2023年全球高性能 AI 服務(wù)器市場(chǎng)規模
    的頭像 發(fā)表于 08-10 11:30 ?2872次閱讀
    2023年<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>全球規模將達248億美元 中國網(wǎng)絡(luò )四巨頭向英偉達下50億美元訂單

    臺灣AI服務(wù)器及玩家分析(2023)

    面對ChatGPT帶來(lái)的人工智能浪潮,海外科技巨頭進(jìn)一步加大云資本開(kāi)支,并提升AI投入比例,中國臺灣服務(wù)器ODM廠(chǎng)商作為海外科技巨頭的主要供應商將直接受益。國內服務(wù)器廠(chǎng)商受到GPU供貨
    的頭像 發(fā)表于 08-08 16:27 ?2715次閱讀
    臺灣<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>及玩家分析(2023)

    ChatGPT熱潮繼續 甲骨文將在其人力資源軟件中添加生成式AI功能

    ChatGPT熱潮繼續 甲骨文將在其人力資源軟件中添加生成式AI功能 ChatGPT 這類(lèi) AI 工具已經(jīng)在科技行業(yè)掀起了一股
    的頭像 發(fā)表于 06-29 15:54 ?440次閱讀

    AI服務(wù)器與傳統服務(wù)器的區別是什么?

    AI 服務(wù)器確實(shí)是整個(gè)服務(wù)器市場(chǎng)的一部分,但它們是專(zhuān)門(mén)為基于云的 AI 模型訓練或推理而設計的。在規格方面,廣義的AI
    發(fā)表于 06-21 12:40 ?1489次閱讀
    亚洲欧美日韩精品久久_久久精品AⅤ无码中文_日本中文字幕有码在线播放_亚洲视频高清不卡在线观看