亚洲精品国产情侣av在线_91亚洲国产成人久久精品网站_亚洲AV无码专区电影在线观看_亚洲AV无码专区亚洲AV桃

首頁 > 資訊 > > 正文

“百模大戰”下算力租賃需求猛增,超算架構為大模型訓練提速

2023-07-11 20:34:59    來源:澎湃網

“百模大戰”下大模型算力需求猛增。北京超級云計算中心計劃今年下半年起陸續上線3萬余張滿足大模型訓練場景用的GPU卡,搭建超算架構大模型算力矩陣;并組建一支7×24小時技術服務團隊。“在未來的市場競爭上,誰能把可用的資源變成好用的資源,誰就會在市場上勝出。”

北京超級云計算中心機房。

算力是當代生產力,超級計算也被稱為高性能計算,同時使用幾十臺甚至幾千臺服務器這樣龐大的算力資源共同完成一個計算任務。人工智能大模型的爆發讓算力需求陡增。

“目前主流的大模型訓練是超算使用模式,超算相比云計算更加貼合大模型訓練場景,服務器之間的計算帶寬配比更大,是目前主流云計算環境中的計算網絡帶寬的數十倍,數據傳輸效率要求更高。”2023世界人工智能大會期間,北京超級云計算中心CTO甄亞楠對澎湃科技(www.thepaper.cn)表示,北京超級云計算中心當前可調度超100萬CPU核心、超2萬張基于超算架構的大模型GPU算力卡。今年下半年起,北京超級云計算中心計劃陸續上線3萬余張適用大模型訓練場景用的GPU卡,滿足國產大模型研發需求,構建算力生態。

北京超級云計算中心(下稱“北京超算”)成立于2011年,是在北京市人民政府指導下“院市”共建的國家重要信息化基礎平臺,坐落于北京市懷柔綜合性國家科學中心懷柔科學城,成立之初主要為北京市提供在線算力資源,已在北京、內蒙古、寧夏布局三大算力樞紐。

計劃陸續上線超3萬余張GPU滿足大模型訓練

算力是人工智能大模型訓練的核心生產力,GPT-4等大模型成功的背后有著萬張訓練卡的計算資源支撐,大模型爆發直接帶來了算力需求陡增。北京超級云計算中心營銷總監王永旭切身感受到了大模型爆發帶來的“顛覆性”算力業務。在大模型興起前,他所在的單位算力客戶小而散,以科研院所為主;大模型流行后,AI算力需求猛增,客戶主要為AIGC(生成式人工智能)企業,“ChatGPT的盛行為市場打了一劑強心針。”

北京超級云計算中心CTO甄亞楠。

北京超級云計算中心CTO甄亞楠介紹,“從客戶需求情況來看,現在大模型單次訓練任務基本上都需要幾百張甚至幾千張GPU卡做計算加速,同時需要長周期、穩定可靠的計算環境,保障計算任務不中斷。”他表示,相對于大型科技公司,科研院所和初創企業的資金實力較弱,建設算力中心的投入高,因此平衡算力成本是重要考量。如果要新建1000張GPU卡的算力規模,包括服務器、交換機、存儲、運營等相關資金投入就需要2億元甚至更多。與此同時,目前國內仍處于缺卡狀態,“各大服務器廠商要拿到新的GPU卡資源,預計供貨周期都在半年以上,算力卡供不應求的情況應該會一直持續到至少明年年初。”

市場對于人工智能算力的需求旺盛。甄亞楠表示,北京超算具備天然的“技術基因”,目前可調度超100萬CPU核心、超2萬張基于超算架構的大模型GPU算力卡。從今年7月起,北京超算計劃上線11720余張英偉達A800算力卡,以及19000余張英偉達H800算力卡。總體來看,從今年下半年起,北京超算將總計上線超3萬張滿足大模型訓練場景用的GPU卡。

北京超算將符合推理與訓練的算力資源通過云服務方式共享給用戶,用戶通過租賃方式遠程訪問算力資源。在甄亞楠看來,這種算力使用方式性價比高,用戶無需自建算力中心就能獲得穩定可靠的計算資源,節省使用成本,縮短計算時長,提高效率。相對于企業根據產品研發需求自建算力中心形成算力使用的波峰和波谷,算力服務商提供彈性算力,拉平算力需求,不浪費算力資源。

把可用的算力資源變成好用的算力資源

“我們最近看到一些大模型的訓練需求,服務器之間的互聯網帶寬一般要求達到3200Gbps,但主流的云計算服務器之間的網絡帶寬在200Gbps,相差十幾倍。如果環境配置和用戶需求無法統一,用戶的模型要么跑不起來,要么運行效果大打折扣。”甄亞楠說,目前主流的大模型訓練是超算使用模式,比如一個模型需要用數百甚至千張卡連續計算兩個月或者更久,超算則是把多臺服務器進行統一管理和調度,實現高性能計算。大模型訓練正是需要超算這種多臺服務器并行的模式,而非傳統云計算所采用的虛擬化共享模式。相比云計算,超算更加貼合大模型訓練場景,服務器之間的計算帶寬配比更大,是目前主流云計算環境中的計算網絡帶寬的數十倍,數據傳輸效率要求更高。

根據王永旭的觀察,大模型算力客戶在選擇算力服務商時,主要關注GPU卡的型號、卡間互聯、節點間互聯、是否為超算架構的物理集群。大模型單次訓練需要上百張甚至幾千張卡,因此通訊非常重要,它會極大影響訓練的速度。用于大模型訓練的芯片必須是卡間互聯大、節點間互聯好的集群,這就好比高速公路暢通無阻、不堵車。

北京超算通過算力預測判斷用戶真正需要的算力資源,基于算力選型首先保證用戶擁有可用的算力資源。甄亞楠表示,在解決可用以后要考慮如何讓算力更好用,“我們為用戶提供的不是單一技術、單一資源,而是一套滿足用戶綜合發展需求的行業解決方案。通過7×24專家服務、平臺預置AI主流框架、常用數據集等方式,滿足用戶在算力使用中方方面面的需求。”為實現算力資源的好用,北京超算在提供算力資源基礎上組建了一支7×24小時技術服務團隊,針對模型框架的安裝、部署、優化以及長時間運行的保障訴求等提供在線技術支持,讓終端用戶輕松調度算力資源。

“在未來的市場競爭上,誰能把可用的資源變成好用的資源,誰就會在市場上勝出。”甄亞楠表示,目前北京超算已服務國內超20萬用戶,包括1000多家企業,并為北京智源人工智能研究院、智譜AI等單位提供大模型預訓練所需的基于超算架構的GPU算力資源。

搭建算力網絡期望GPU算力全國調度

今年5月,中國科學技術信息研究所發布的《中國人工智能大模型地圖研究報告》顯示,中國10億參數規模以上的大模型已發布79個。“我們希望以超算架構支撐大模型算力應用,成為超算架構大模型算力領跑者,不管是基于當前的大模型訓練,還是未來可能會進一步爆發的模型推理。”甄亞楠表示,在“百模大戰”之下,需要分析行業的真正痛點,考慮未來芯片、算力規模、業務場景的發展趨勢。

大模型所需的算力分為兩類,一類是訓練算力,一類是推理算力。訓練是一個計算密集型的學習過程,每一次訓練可以提升模型的精準度,如果計算結果沒有達到預期,就需要調整參數重新訓練,直到達到預期。一旦模型精準度達到一定水準后,就會產生推理需求。推理是一個判斷過程,基于訓練好的模型,每次喂新數據,產生更多的預測結果。

甄亞楠表示,大模型訓練的參數多、循環次數多,單次訓練的算力需求大,而推理的判斷邏輯相對固定,單次算力需求較小,當推理的并發量提升,也會提高推理的算力需求。目前國內大模型仍處于發展初期,大模型企業百舸爭流,發力點主要集中在大模型訓練上,因此訓練算力緊缺。“現在我們面向大模型訓練是提供基于超算架構的算力資源,面對推理以及小規模的測試驗證,我們也提供基于云計算的算力資源,兩條腿走路。”

為了更好地支持人工智能產業發展,王永旭表示,北京超算除了部署算力資源,也在全國搭建算力網絡,以實現GPU算力全國調度的目標。此外參與到大模型用戶的MaaS(模型即服務)推廣中,計劃集成算力、模型和用戶端數據,為用戶提供基于大模型基座的人工智能解決方案。

“中長期內,我們關注國產算力以及國產大模型研發需求,希望構建完善的算力生態,一方面建設滿足行業需求的算力資源,提供算力共享、性能評測、應用場景支撐等服務,另一方面推動算力供應多元化,既提供通用GPU芯片,也提供國產芯片,解決供需失衡問題。”甄亞楠表示,北京超算將依托12年超算技術積淀和超算架構大模型算力矩陣,持續領跑大模型算力建設,以超算云服務模式實現海量算力資源隨需供應,為大模型訓練需求提供一站式解決方案。(張靜)

免責聲明:市場有風險,選擇需謹慎!此文僅供參考,不作買賣依據。

關鍵詞:

上一篇:萊克天狼星三合一大吸力洗地機,靠技術升級激發消費需求
下一篇:最后一頁

熱點話題

熱點推薦

頭條

? 亚洲精品国产情侣av在线_91亚洲国产成人久久精品网站_亚洲AV无码专区电影在线观看_亚洲AV无码专区亚洲AV桃

              av中文字幕在线不卡| 精品第一国产综合精品aⅴ| 亚洲午夜久久久久| 亚洲成人免费视| 色美美综合视频| 在线观看91视频| 欧美日韩免费高清一区色橹橹 | 国产亚洲欧美在线| 国产精品久久久久久久久免费丝袜 | 成人小视频免费观看| 99久久精品费精品国产一区二区| 91在线播放网址| 国产日韩精品一区二区三区| 中文字幕日本乱码精品影院| 亚洲一区二区欧美激情| 在线观看av一区二区| 欧美一区二区免费| 国产情人综合久久777777| 亚洲色欲色欲www在线观看| 亚洲一级二级三级在线免费观看| 图片区日韩欧美亚洲| 国产一区高清在线| 91麻豆精品一区二区三区| 国产精品二三区| 天天影视涩香欲综合网| 91麻豆精品国产| 欧美国产日韩在线观看| 亚洲永久免费视频| 国内精品第一页| 97久久超碰精品国产| 椎名由奈av一区二区三区| 日本韩国精品在线| 精品美女被调教视频大全网站| 中国色在线观看另类| 亚洲gay无套男同| 国产精品18久久久| 欧美激情一区二区三区不卡| 亚洲一区欧美一区| 555夜色666亚洲国产免| 国产亚洲欧美色| 亚洲一区二区三区三| 经典三级视频一区| 久久夜色精品一区| 亚洲网友自拍偷拍| 日韩一区二区三区三四区视频在线观看| 欧美国产精品v| 日本美女一区二区三区视频| 波多野结衣亚洲| 亚洲精品视频一区| 777奇米成人网| 亚洲欧美经典视频| 韩日av一区二区| 中文字幕精品三区| 在线观看一区二区视频| 欧美激情一区在线| 奇米综合一区二区三区精品视频| 99精品国产热久久91蜜凸| 亚洲欧美一区二区三区极速播放| 欧美日韩一区二区三区不卡 | 不卡的av在线播放| 亚洲综合视频在线| 精品国产一区二区三区久久影院| 亚洲福利一区二区三区| 成人教育av在线| 一区二区三区在线观看欧美 | 豆国产96在线|亚洲| 1000精品久久久久久久久| 欧美二区三区的天堂| 亚洲人精品午夜| 国产成人在线视频网站| 亚洲视频一区二区在线| 欧美一区二区精品久久911| 亚洲激情网站免费观看| 粉嫩av一区二区三区在线播放| 亚洲人一二三区| 欧美成人精品1314www| 亚洲成a人片综合在线| 99视频精品在线| 色噜噜偷拍精品综合在线| 国产精品乱码久久久久久| 国内一区二区视频| 亚洲男人的天堂在线观看| 欧美电视剧免费全集观看| 爽爽淫人综合网网站| 国产视频视频一区| 欧美精三区欧美精三区| 亚洲午夜精品久久久久久久久| 91视频免费播放| 欧美日韩在线播放三区四区| 一区二区三区精品视频在线| 91在线云播放| 欧美三级一区二区| 一区二区三区精品| 久久青草国产手机看片福利盒子| 欧美日韩在线播放| 亚洲国产成人91porn| 国产视频一区二区在线观看| 91精品国产91热久久久做人人| 亚洲成人精品在线观看| 日本一区二区三区国色天香| 日韩一区二区视频| 蜜桃视频第一区免费观看| 亚洲精品视频自拍| 中文字幕av资源一区| 成人免费毛片片v| 欧美性高清videossexo| 亚洲一区二区黄色| 国产欧美日韩在线观看| 精品欧美一区二区三区精品久久| 麻豆一区二区三区| 一区二区三区精品| 国产精品免费网站在线观看| www.66久久| 欧美肥妇毛茸茸| 蜜芽一区二区三区| 亚洲一区二区中文在线| 亚洲色图视频网站| 久久精品亚洲精品国产欧美| 欧美成人一级视频| 国产一区二区在线观看视频| 天天做天天摸天天爽国产一区| 亚洲精品一卡二卡| 中文av字幕一区| 日本一区二区电影| 久久一区二区三区四区| 日韩欧美成人一区二区| 国产在线不卡视频| 欧美综合视频在线观看| 亚洲一区影音先锋| 自拍偷拍亚洲激情| 国产精品久久毛片av大全日韩| 91麻豆蜜桃一区二区三区| 精品乱码亚洲一区二区不卡| 国产成a人亚洲精品| 欧美日韩精品一区二区三区蜜桃| 日本91福利区| 一本大道av一区二区在线播放| 亚洲国产成人高清精品| 一区二区欧美在线观看| 夜夜嗨av一区二区三区网页| 亚洲人精品一区| 亚洲卡通欧美制服中文| 亚洲欧洲一区二区在线播放| 综合婷婷亚洲小说| 国产精品免费视频网站| 国产精品护士白丝一区av| 亚洲国产精品成人综合色在线婷婷| 国产视频一区在线播放| 91麻豆免费观看| 久久久91精品国产一区二区精品| 91丨porny丨国产| 国产亚洲短视频| 久久精品视频一区二区三区| 欧美国产禁国产网站cc| 欧美国产日韩亚洲一区| 国产精品亲子伦对白| 国产欧美一区二区精品婷婷| 国产精品美女久久久久aⅴ国产馆 国产精品美女久久久久av爽李琼 国产精品美女久久久久高潮 | 亚洲婷婷国产精品电影人久久| 亚洲国产精品ⅴa在线观看| 国产精品久久久久9999吃药| 国产精品大尺度| 一区二区三区日韩欧美精品| 亚洲已满18点击进入久久| 午夜精品久久久久久久| 在线视频中文字幕一区二区| 精品亚洲欧美一区| 欧美精品久久一区二区三区| 国产成人精品免费网站| 精品日本一线二线三线不卡| 久久午夜色播影院免费高清 | 看电视剧不卡顿的网站| 欧美日本国产视频| 成人性生交大片免费| 久久久99精品久久| 国产精品丝袜一区| 亚洲一区在线电影| 在线免费不卡电影| 国产丶欧美丶日本不卡视频| 欧美哺乳videos| 久久久久国产精品免费免费搜索 | 久久精品久久久精品美女| 欧美日韩精品欧美日韩精品| 成人免费观看男女羞羞视频| 久久精品夜夜夜夜久久| 国产精品久久久久久久久快鸭| 亚洲在线中文字幕| 欧美亚洲免费在线一区| 成人黄色软件下载| 国产精品青草久久| 亚洲在线成人精品| 国内成人免费视频| 2020日本不卡一区二区视频| 国产精品天干天干在观线| 午夜在线成人av| 69精品人人人人| 久久久精品tv| 亚洲国产成人91porn| 欧美日韩高清不卡| 久久亚洲影视婷婷|