2023成都積分入學(xué)什么時候開始申請
2023-01-31
全球首創(chuàng)！智算網(wǎng)絡(luò)正式上線
更新時間：2022-06-17 20:30:20作者：佚名
【文/觀察者網(wǎng) 呂棟】
今年4月，《中共中央 國務(wù)院關(guān)于加快建設(shè)全國統(tǒng)一大市場的意見》正式發(fā)布，其中指出，要通過建設(shè)全國統(tǒng)一大市場，讓資源、要素流動更暢通，全面推動中國市場由大到強(qiáng)。
隨著中國加快邁入數(shù)字經(jīng)濟(jì)時代，算力正成為新的生產(chǎn)要素，人工智能計算中心、超算中心以及全國一體化算力網(wǎng)絡(luò)樞紐節(jié)點等，正作為國家新型算力基礎(chǔ)設(shè)施加快建設(shè)。
在各種算力設(shè)施如雨后春筍般涌現(xiàn)的背景下，要想優(yōu)化算力資源配置，突破單點算力極限，提高數(shù)據(jù)流通效率，建設(shè)全國統(tǒng)一的算力網(wǎng)絡(luò)和算力大市場勢在必行。
5月底，鵬城實驗室的“中國算力網(wǎng)（China Computing NET，C2NET）”計劃首次公開。該計劃提出要構(gòu)建自主可控的算力網(wǎng)絡(luò)技術(shù)體系，要“像建設(shè)電網(wǎng)一樣建設(shè)國家算力網(wǎng)，像運(yùn)營互聯(lián)網(wǎng)一樣運(yùn)營算力網(wǎng)，讓用戶像用電一樣使用算力服務(wù)”。
華為計算產(chǎn)品線總裁鄧泰華
鵬城實驗室主任、中國工程院院士高文指出，建設(shè)中國算力網(wǎng)，要通過突破異構(gòu)兼容、算網(wǎng)融合、云際協(xié)同等關(guān)鍵核心技術(shù)，實現(xiàn)全國大型算力的協(xié)同調(diào)度和高效計算，推動國家“東數(shù)西算”戰(zhàn)略重要節(jié)點互聯(lián)互通，更好地滿足中國經(jīng)濟(jì)社會高質(zhì)量發(fā)展的新需求。
如今，這一全球首創(chuàng)、致力于打造中國數(shù)字經(jīng)濟(jì)算力底座的重大計劃，邁出標(biāo)志性一步。
中國算力網(wǎng)開始落地
“今天，我們迎來一個重要的歷史時刻。”
在6月15日舉辦的華為伙伴暨開發(fā)者大會上，鵬城實驗室主任、中國工程院院士高文，科技部高新技術(shù)司副司長梅建平，華為計算產(chǎn)品線總裁鄧泰華，共同見證了中國算力網(wǎng)—智算網(wǎng)絡(luò)一期的上線。
中國算力網(wǎng)—智算網(wǎng)絡(luò)一期的成功搭建，標(biāo)志著中國算力網(wǎng)建設(shè)開始正式落地，而智算網(wǎng)絡(luò)的構(gòu)建基礎(chǔ)則是各地建成的人工智能計算中心。
當(dāng)前，人工智能已成為數(shù)字經(jīng)濟(jì)高質(zhì)量發(fā)展的引擎，人工智能計算中心作為人工智能算力基礎(chǔ)設(shè)施受到全球廣泛重視，美國、歐洲、日本等國家和地區(qū)都在積極推動人工智能計算中心的建設(shè)，中國作為人工智能大國自然也不例外。
過去一年多，基于昇騰AI集群，鵬城云腦II和武漢人工智能計算中心陸續(xù)上線，拉開了中國各地建設(shè)人工智能計算中心（AICC，Artificial Intelligence Computing Center）的序幕。目前，全國已經(jīng)有二十多個算力領(lǐng)先城市，基于昇騰AI軟硬件平臺和華為集群計算解決方案，建設(shè)了人工智能計算中心。
在各地人工智能計算中心陸續(xù)建成后，搭建中國算力網(wǎng)-智算網(wǎng)絡(luò)的條件也隨之成熟。
作為中國人工智能行業(yè)的重要參與者，昇騰AI其實很早就已洞察到算力網(wǎng)絡(luò)的發(fā)展趨勢。
鄧泰華告訴觀察者網(wǎng)，中國已建成電力網(wǎng)、高鐵網(wǎng)、通信網(wǎng)，未來肯定也會建成算力網(wǎng)。這個算力網(wǎng)就是把當(dāng)前各地獨立建設(shè)的算力資源，尤其是大型算力資源，通過連成一張網(wǎng)，實現(xiàn)最大化數(shù)據(jù)流通共享，再基于各個地方共享的算力資源，提供更高效的算力開發(fā)方案。
2021年12月，在科技部指導(dǎo)下，鵬城實驗室、華為、百度、訊飛等近20家單位，聯(lián)合發(fā)起人工智能算力網(wǎng)絡(luò)推進(jìn)聯(lián)盟，推進(jìn)各地上線的AICC連接成網(wǎng)、上線運(yùn)行。
如今，隨著中國算力網(wǎng)-智算網(wǎng)絡(luò)一期正式上線，各地的人工智能計算中心也順利連接成網(wǎng)，可動態(tài)實時感知算力資源狀態(tài)，實現(xiàn)統(tǒng)籌分配和調(diào)度計算任務(wù)，構(gòu)成區(qū)域內(nèi)可感知、可分配、可調(diào)度的AI算力資源，以“一網(wǎng)絡(luò)”實現(xiàn)“三匯聚”：
算力匯聚：不同人工智能計算中心之間高速網(wǎng)絡(luò)互聯(lián)，實現(xiàn)算力合理調(diào)度和資源彈性分配，提升各人工智能計算中心的利用率，還可實現(xiàn)整體能耗節(jié)省。 數(shù)據(jù)匯聚：多方合作，推進(jìn)AI領(lǐng)域的公共數(shù)據(jù)開放，基于人工智能計算中心匯聚高質(zhì)量的開源開放的AI數(shù)據(jù)集，促進(jìn)AI算法開發(fā)和行業(yè)落地。 生態(tài)匯聚：采用互聯(lián)、應(yīng)用接口等標(biāo)準(zhǔn)，強(qiáng)化跨區(qū)域科研和產(chǎn)業(yè)協(xié)作，為所有用戶進(jìn)行AI應(yīng)用創(chuàng)新提供更多的資源選擇和更便捷的合作方式，加速產(chǎn)業(yè)聚合，激活產(chǎn)業(yè)共融共生。
智算網(wǎng)絡(luò)為大模型發(fā)展帶來新機(jī)遇
當(dāng)前在AI領(lǐng)域，人工智能大模型具備更強(qiáng)泛化能力適配多個場景，發(fā)展大模型已成為產(chǎn)學(xué)研各界共識。而智算網(wǎng)絡(luò)匯聚了大量算力和數(shù)據(jù)，為大模型的訓(xùn)練創(chuàng)造了天然有利的條件。
這里以一個盤古多語言大模型的真實任務(wù)，演示用戶如何提交任務(wù)、協(xié)同多個算力中心資源進(jìn)行訓(xùn)練。
鄧泰華告訴觀察者網(wǎng)，目前部分用戶確實還在基于自建算力訓(xùn)練大模型。但未來隨著大模型越來越復(fù)雜，數(shù)據(jù)量越來越大，如果企業(yè)和科研機(jī)構(gòu)都靠自有算力去訓(xùn)練，可能無法提供足夠的算力，訓(xùn)練時長也會大幅增加。另外，即便用戶自建了足夠大的算力，但計算業(yè)務(wù)天然存在波動，仍會出現(xiàn)能耗閑置，并不是一種最經(jīng)濟(jì)的選擇，也不符合國家“雙碳”的目標(biāo)。
因此，包括人工智能計算中心、超算中心等大型算力基礎(chǔ)設(shè)施，天然適合集約化建設(shè)。
通過算力網(wǎng)絡(luò)協(xié)同調(diào)度，在A中心算力波峰時，可以將排隊任務(wù)轉(zhuǎn)移到算力波谷的B中心計算，削峰填谷，多計算中心都可以保持算力高利用率，將計算中心的能耗充分利用起來，從全局和長遠(yuǎn)角度看，是進(jìn)一步提升電能利用率、降低碳排放的有效路徑。
后續(xù)，不僅是智算中心聯(lián)網(wǎng)，各地超算中心、一體化大數(shù)據(jù)中心算力樞紐，都可以并入中國算力網(wǎng)，實現(xiàn)數(shù)據(jù)、算力、算法、模型、服務(wù)等多要素共享與流通，用戶也可以按需申請、按需使用，在全國范圍內(nèi)調(diào)集算力來訓(xùn)練大模型。
對于大模型訓(xùn)練來說，算力十分重要，AI計算框架的支撐同樣必不可少。
在極致性能上，昇騰AI框架MindSpore支持全自動并行，可以把大模型拆分到不同的算子，訓(xùn)練過程中大圖可以拆分成小圖，小圖可以拆分成不同的計算單位，全部實現(xiàn)自動化，不需要人工干預(yù)，可以最大化的利用算力資源，提升整個模型的訓(xùn)練效率。
為了更好的使能大模型發(fā)展，昇騰AI還構(gòu)建了從規(guī)劃、開發(fā)到產(chǎn)業(yè)化的大模型全流程使能體系：包括建立大模型沙盤，規(guī)劃并牽引產(chǎn)業(yè)界真正需要的大模型；推出大模型開發(fā)使能平臺，讓開發(fā)者能夠快速完成大模型開發(fā)；在大模型訓(xùn)練出來后，攜手業(yè)界伙伴共建大模型產(chǎn)業(yè)聯(lián)盟，讓更多伙伴基于大模型進(jìn)行場景化方案聯(lián)創(chuàng)實現(xiàn)產(chǎn)業(yè)化推廣。
過去一年，中國產(chǎn)業(yè)界基于昇騰智算中心先后發(fā)布一系列有影響力的大模型，包括華為云.盤古系列大模型；在NLP領(lǐng)域，鵬城實驗室發(fā)布了鵬程.盤古；百度發(fā)布鵬城-百度.文心；智源研究院發(fā)布悟道；多模態(tài)領(lǐng)域，中科院自動化所發(fā)布全球首個三模態(tài)大模型紫東.太初；在生物制藥領(lǐng)域的鵬程.神農(nóng)等等。
對于大模型來說，最為關(guān)鍵的還是產(chǎn)業(yè)化落地。
2021年底，基于全球首個智能遙感框架武漢.LuoJia和全球首個三模態(tài)大模型紫東.太初，華為攜手伙伴成立了智能遙感開源生態(tài)聯(lián)盟和多模態(tài)人工智能產(chǎn)業(yè)聯(lián)盟，如今半年多時間過去，兩大聯(lián)盟已經(jīng)開花結(jié)果，陸續(xù)孵化出多個行業(yè)解決方案。
例如，千博信息基于紫東.太初開發(fā)了手語多模態(tài)模型，開創(chuàng)性地實現(xiàn)手語動作與示意圖片和文字的聯(lián)動，讓初學(xué)聽障人士更加方便的理解，幫助他們解決溝通、就業(yè)等一系列難題。
這也充分體現(xiàn)出AI成果轉(zhuǎn)化中的社會價值。
更重要的是，在大模型產(chǎn)業(yè)化落地過程中，可以以更豐富的數(shù)據(jù)和參數(shù)、更泛化的應(yīng)用場景，來反哺大模型基礎(chǔ)能力，讓大模型更智能、場景適用性更好，從而又可以對行業(yè)應(yīng)用提供更大的支持，這樣就能形成大模型創(chuàng)新、到應(yīng)用、到迭代創(chuàng)新的產(chǎn)業(yè)正循環(huán)。
中國算力網(wǎng)建設(shè)仍有問題待解
隨著中國算力網(wǎng)—智算網(wǎng)絡(luò)一期正式上線，人工智能計算中心將不再“孤軍奮戰(zhàn)”，算力、大模型、數(shù)據(jù)集、行業(yè)應(yīng)用等人工智能要素將充分流動共享，成為應(yīng)對新需求的重要途徑。
但對整個中國算力網(wǎng)的建設(shè)來說，似乎仍任重道遠(yuǎn)。
鄧泰華告訴觀察者網(wǎng)，建設(shè)中國算力網(wǎng)是一個持續(xù)迭代的過程，并不是靜止的目標(biāo)，未來需要經(jīng)過持續(xù)優(yōu)化、不斷擴(kuò)大范圍的過程，所以目前的智算網(wǎng)絡(luò)只是中國算力網(wǎng)一期，并且也只是以“鵬城云腦”作為核心節(jié)點，實現(xiàn)數(shù)個智算中心聯(lián)網(wǎng)，以及最基本的任務(wù)編排調(diào)度。
未來發(fā)展方向，無疑是要讓更多算力接入中國算力網(wǎng)。但要實現(xiàn)這個目標(biāo)，似乎還有許多問題需要解決。
例如，算力網(wǎng)技術(shù)架構(gòu)應(yīng)該怎么規(guī)劃，技術(shù)方案怎么實現(xiàn)？怎么保證算力相互連在一起，任務(wù)、資源可以共同調(diào)度，中間的時延怎么解決？不同的調(diào)度基于不同的需求，怎樣做到全域的編排管理？統(tǒng)一調(diào)度對于單點數(shù)據(jù)中心怎么來對接？數(shù)據(jù)中心之間的傳輸怎么來配合？
鄧泰華認(rèn)為，如果把整個中國算力網(wǎng)作為一個大的體系來看，這個體系的技術(shù)架構(gòu)如何規(guī)劃創(chuàng)新，現(xiàn)在尚未成型，因為中國算力網(wǎng)是全球首創(chuàng)，所以并沒有成型的先例可以參考。
今年2月，國家發(fā)展改革委、中央網(wǎng)信辦、工業(yè)和信息化部、國家能源局四部門聯(lián)合發(fā)布《全國一體化大數(shù)據(jù)中心協(xié)同創(chuàng)新體系算力樞紐實施方案》，明確提出布局全國算力網(wǎng)絡(luò)國家樞紐節(jié)點，啟動實施“東數(shù)西算”工程，構(gòu)建國家算力網(wǎng)絡(luò)體系。
鄧泰華指出，東數(shù)西算、東數(shù)西存乃至東數(shù)西訓(xùn)都有不同的應(yīng)用場景，是一個大的體系規(guī)劃。目前，東數(shù)西算、東數(shù)西存以及東數(shù)西訓(xùn)一體化大數(shù)據(jù)中心樞紐還處在規(guī)劃階段，部分地方剛開始啟動建設(shè)還沒有上線，而基于昇騰AI的智算中心已批次建成，目前實現(xiàn)9個城市的計算中心聯(lián)網(wǎng)并上線。未來，隨著一體化大數(shù)據(jù)中心上線，具備條件后也將并入中國算力網(wǎng)。