【新智元導(dǎo)讀】這次,昇思大模型平臺迎來了全新升級,不僅推出了大模型產(chǎn)業(yè)專區(qū),而且還開放了AI畫廊社交平臺,讓開發(fā)者找到創(chuàng)作樂趣。
自2019年開始,超大規(guī)模預(yù)訓(xùn)練模型逐漸涌出,到2020年發(fā)展到白熾化階段。
1750億參數(shù)的GPT-3大模型的發(fā)布,大模型參數(shù)規(guī)模實現(xiàn)了從億級到千億級的突破。
2022年ChatGPT的橫空出世再次點燃了人工智能火炬,國內(nèi)外大廠開始紛紛發(fā)布自家大模型。
可以說,大模型邁出了通用人工智能的第一步,作為未來社會技術(shù)突破與變革的關(guān)鍵力量,將深刻影響未來產(chǎn)業(yè)格局 。
然而,模型復(fù)雜度高,參數(shù)量大,對算力提出了極大的需求,基于目前業(yè)界已有主流框架進行大模型的開發(fā),并不能很好地適應(yīng)產(chǎn)業(yè)需求。
為此,昇思MindSpore作為新時代的AI框架,在設(shè)計之初就充分考慮大模型開發(fā)時可能會遇到的問題,為大模型創(chuàng)新開發(fā)提供了完備的硬核技術(shù)。
通過軟硬件協(xié)同優(yōu)化,實現(xiàn)一行代碼即可完成模型自動切分、分布式并行計算,將大模型開發(fā)并行代碼量降低 80%、系統(tǒng)調(diào)優(yōu)時間下降 60%。
此外,它還有極致的全局內(nèi)存復(fù)用能力,512卡就可以訓(xùn)練10 萬億參數(shù)大模型,極大降低大模型訓(xùn)練成本;極簡的斷點續(xù)訓(xùn)能力,開發(fā)者無需從頭開始,千億參數(shù)模型在分鐘級就可無損恢復(fù)。
昇思MindSpore充分發(fā)揮原生支持大模型訓(xùn)練的能力,降低大模型創(chuàng)新開發(fā)門檻。
基于昇思MindSpore AI框架,中科院自動化所、武漢大學(xué)等科研單位先后發(fā)布業(yè)界首個圖文音三模態(tài)大模型「紫東.太初」,全球首個智能遙感框架「武漢.LuoJia」、業(yè)界首個基于擴散模型和最大開源中文數(shù)據(jù)集生成的中文生圖大模型「悟空.畫畫」等多個大模型。
為了讓AI大模型更好地普惠大眾,昇思社區(qū)打造了首個基于國產(chǎn)AI算力和框架、服務(wù)全球開發(fā)者的一站式大模型平臺,將大模型的能力開放給開發(fā)者。
昇思大模型平臺:https://xihe.mindspore.cn/
平臺是集模型選型、創(chuàng)意分享、在線體驗為一體的一站式AI學(xué)習(xí)與實踐平臺,具備AI實驗室,模型庫,大模型在線體驗與微調(diào),數(shù)據(jù)集等多個模塊,提供超強免費算力,經(jīng)典易用的樣例,優(yōu)質(zhì)精美的在線學(xué)習(xí)課程資源,類型多樣的AI大賽和內(nèi)容有趣的社區(qū)活動等。
近期,社區(qū)為了給企業(yè)開發(fā)者更好的體驗,平臺在各個模塊也進行了升級:
在產(chǎn)業(yè)布局上,打造大模型行業(yè)專區(qū),包括電力專區(qū)、工業(yè)專區(qū)等,面向企業(yè)開發(fā)者提供從模型訓(xùn)練、推理到部署的AI應(yīng)用開發(fā)專區(qū)。
在全球化布局上,聯(lián)手Hugging Face推出基于昇騰AI的首個基于國產(chǎn)AI算力的Space體驗專區(qū),開發(fā)者可以在Hugging Face上體驗所有昇思大模型推理服務(wù)。
在新一代AIGC社交上,開放了業(yè)界首個基于AI畫廊的技術(shù)內(nèi)容社交能力。
在平臺易用性方面,支持Jupyter Notebook在線編程,新增MindSpore Transformers模塊。另外,平臺還推出了課程模塊,覆蓋了CV、NLP以及大模型開發(fā)多個領(lǐng)域,讓開發(fā)者可以在平臺從0到1的學(xué)習(xí)與實踐AI項目。
開放基于AI畫廊技術(shù)社交平臺,讓AI「大眾化」
昇思大模型平臺對悟空.畫畫大模型體驗功能進行全新升級!開放了業(yè)界首個基于AI畫廊的技術(shù)內(nèi)容社交能力,讓AI技術(shù)從「專業(yè)化」走向「大眾化」。悟空.畫畫是基于Diffusion結(jié)構(gòu)開發(fā)的中文文生圖大模型,訓(xùn)練時使用了中文億級文圖數(shù)據(jù),借助悟空中文視覺-語言預(yù)訓(xùn)練模型的判別能力實現(xiàn)更好的中文圖文匹配。悟空.畫畫有著強大的文生圖能力,能夠識別各類場景描述與繪畫風(fēng)格。開發(fā)者們在進行文生圖的過程中,可以通過簡單的提示,選擇自己喜歡的風(fēng)格,就能夠創(chuàng)作出優(yōu)秀、精美的畫作,讓每個開發(fā)者使用便捷,并且容易上手。與此同時,對于生成的精美畫作,開發(fā)者還可以通過全新的「AI畫廊」,發(fā)布自己的創(chuàng)意作品。最重要的是,當(dāng)你看到了他人驚艷的作品,還能點贊、分享和收藏。不僅增加了你與其他開發(fā)者的互動,而且還豐富了AI社交娛樂性,從中找到了AI帶來的樂趣。
在線體驗入口:https://xihe.mindspore.cn/modelzoo/wukong/album平臺使用AIGC內(nèi)容創(chuàng)作生成技術(shù)連接人與人之間的關(guān)系,讓AI生成圖片走入了人們的日常。根據(jù)用戶的喜好,為用戶插上想象力的翅膀,通過算法快速實現(xiàn)用戶的想法,結(jié)合收藏,分享等行為,進一步豐富用戶在內(nèi)容方向的互動體驗。平臺利用生成式AI為用戶構(gòu)建了一個創(chuàng)造性的新世界,在這里,我們幫助用戶實現(xiàn)他們天馬行空的想法,收獲擁有同樣想法的朋友的認可。當(dāng)然,除了豐富用戶的社交,生成式AI的作用遠不止于此,在某些情況下它可以解鎖更好、更快、更便宜的創(chuàng)作,產(chǎn)生巨大的勞動生產(chǎn)率和經(jīng)濟價值。對于企業(yè)用戶而言,除了可以隨時發(fā)現(xiàn)平臺上富有創(chuàng)意的作品,也可以根據(jù)企業(yè)自身的需求和輸入,自動生成風(fēng)格多樣的內(nèi)容,幫助企業(yè)高效優(yōu)化設(shè)計方案。
金融 數(shù)字 科技感 #風(fēng)格:高清
基于悟空.畫畫生成圖片制作的金融畫報
在線體驗悟空.畫畫:https://xihe.mindspore.cn/modelzoo/wukong構(gòu)建大模型產(chǎn)業(yè)專區(qū),助力企業(yè)數(shù)智化轉(zhuǎn)型
平臺規(guī)劃建設(shè)業(yè)界首個大模型產(chǎn)業(yè)專區(qū),旨在面向企業(yè)開發(fā)者提供從模型訓(xùn)練、推理到部署的AI應(yīng)用開發(fā)專區(qū)。目前,已上線人文、電力、醫(yī)療、工業(yè)四個場景企業(yè)案例。后續(xù)平臺將上線相關(guān)案例精選模型,如國潮AIGC模型、電力領(lǐng)域大模型等,幫助企業(yè)在平臺上部署大模型,建立行業(yè)樣例標桿。
結(jié)合已有模塊和能力,平臺將為企業(yè)打造一套完整的平臺解決方案:- 在開發(fā)方面:聯(lián)合行業(yè)客戶開放企業(yè)模型相關(guān)項目代碼到AI實驗室,開放相關(guān)業(yè)務(wù)模型到模型庫,供開發(fā)者查詢/下載/本地使用,開發(fā)者可基于該代碼在線體驗?zāi)P陀?xùn)練,評估和推理,并進行二次優(yōu)化,將優(yōu)化后的結(jié)果貢獻平臺與企業(yè)。
在賦能方面:平臺課程模塊將持續(xù)上線高價值的企業(yè)AI課程,幫助開發(fā)者更好認識企業(yè)的業(yè)務(wù);當(dāng)前面臨的現(xiàn)狀、痛點;為企業(yè)開發(fā)者賦能,能夠快速理解業(yè)務(wù)分析符合企業(yè)需求的模型。同時,平臺可聯(lián)合企業(yè)策劃并開展比賽,在比賽模塊上線企業(yè)專題比賽。
在伙伴共建方面:昇思社區(qū)將聯(lián)合企業(yè),共同開展企業(yè)專場活動;在平臺展示企業(yè)精選模型,幫助企業(yè)快速部署大模型,樹立行業(yè)標桿。- 在易用性方面:平臺后臺可提供數(shù)據(jù)統(tǒng)計模塊,統(tǒng)計企業(yè)各個模塊的訪問量,調(diào)用次數(shù),模型下載量等指標。平臺還將在未來建設(shè)更多企業(yè)專區(qū),歡迎企業(yè)加入昇思社區(qū),與昇思一同推動企業(yè)數(shù)智化轉(zhuǎn)型,讓大模型賦能千百行業(yè)。聯(lián)合各地人工智能計算中心與Hugging Face社區(qū),讓大模型服務(wù)全球開發(fā)者
平臺是首個基于國產(chǎn)AI算力和框架、服務(wù)全球開發(fā)者的一站式大模型平臺,可實現(xiàn)跨人工智能計算中心彈性調(diào)度各地昇騰AI算力,支撐開發(fā)者高效開發(fā)。目前,全國已有20多座城市啟動建設(shè)人工智能計算中心, 10多個城已正式上線,為區(qū)域發(fā)展提供普惠AI算力。
為了讓算力被最大化的使用,昇思大模型平臺將優(yōu)化現(xiàn)有算力管理結(jié)構(gòu),讓各計算中心能夠無縫接入,演進算力調(diào)度策略和機制,根據(jù)策略自動實現(xiàn)訓(xùn)練任務(wù)多算力中心資源的最佳分配。通過聯(lián)結(jié)多計算中心算力,使得大模型的開發(fā)不再需要考慮算力資源問題,平臺根據(jù)用戶的需求,所屬的地域和算力情況等因素進行綜合考量,自動為用戶分配可用的算力節(jié)點,讓大模型開發(fā)和使用變得更加簡單。截至目前,平臺已接入首個基于昇騰AI的人工智能計算中心部署了包括悟空.畫畫,紫東.太初等多個AI大模型,對開發(fā)者開放大模型的在線體驗服務(wù)。同時平臺聯(lián)手Hugging Face社區(qū)推出基于昇騰AI的的首個Space體驗專區(qū),搭載平臺后臺的大模型推理能力,讓全球開發(fā)者可以在Hugging Face上體驗所有昇思大模型推理服務(wù)。
未來,昇思大模型平臺將接入更多的人工智能計算中心,提供更多基于國產(chǎn)算力的大模型開發(fā)服務(wù),同時聯(lián)合更多外部開源社區(qū),包括但不限于Hugging Face社區(qū),使得更多的國內(nèi)外開發(fā)者能夠零距離地感受到基于國產(chǎn)算力開發(fā)的昇思大模型帶來的極致體驗。手把手教學(xué),平臺即開即用
除了上述提到的大模型和算力外,昇思大模型平臺還為企業(yè)提供了開發(fā)和內(nèi)容上的賦能。- 昇思大模型平臺新增支持Jupyter Notebook在線編程,預(yù)裝豐富依賴,無需環(huán)境搭建,即開即用;- 同時,此次升級還新增了MindSpore Transformers模塊,并提供pipeline高階易用接口簡化代碼,支持開發(fā)者一鍵下載、加載、推理和部署模型,幫助企業(yè)開發(fā)者快速實現(xiàn)創(chuàng)意。
不僅如此,開發(fā)者也可以在Jupyter中編寫Gradio應(yīng)用代碼,實現(xiàn)推理可視化。
除了模型的開發(fā)和維護外,開發(fā)者還可以通過昇思大模型平臺一鍵在線學(xué)習(xí),參加比賽。- 面向企業(yè)開發(fā)者提供了優(yōu)質(zhì)精美的在線課程資源,如AI大模型、計算機視覺等多領(lǐng)域系列,平臺支持作業(yè)布置與提交等能力。通過課程賦能學(xué)習(xí)的開發(fā)者,社區(qū)可頒發(fā)認證證書,助力企業(yè)人才培養(yǎng)。
平臺提供了類型多樣的AI大賽,比如面向新手的昇思學(xué)習(xí)賽,AI挑戰(zhàn)賽等等。平臺支持自動打分、實時排名,輔助比賽高效進行。比賽模塊支持企業(yè)、高校基于昇思MindSpore開展賽事,幫助企業(yè)打通開發(fā)者渠道路線。
賦能千行百業(yè),昇思大模型平臺將持續(xù)發(fā)力
昇思MindSpore開源社區(qū)一直秉承「開發(fā)者第一、技術(shù)優(yōu)先」的理念,持續(xù)使能科研創(chuàng)新與產(chǎn)業(yè)應(yīng)用,通過原生的技術(shù)體系,不斷加速中國AI應(yīng)用生態(tài)。截止目前昇思MindSpore 社區(qū)已擁有核心貢獻者11000+,下載量超過435萬,服務(wù)企業(yè)5500+,MSG足跡遍布國內(nèi)外30個城市。其中MSG暴走校園走進國內(nèi)外近百所高校,為萬名高校開發(fā)者賦能;MSG企業(yè)行走過8大城市,并開展7大領(lǐng)域互動,大幅覆蓋AI企業(yè)用戶。昇思MindSpore在碼云(Gitee)千萬開源項目中活躍度排名第一。昇思MindSpore AI框架已經(jīng)成為了大模型開發(fā)的技術(shù)支撐,開源開放更使得產(chǎn)學(xué)界可以基于它研發(fā)自己的大模型。未來昇思大模型平臺將持續(xù)發(fā)力,讓更多基于昇思 MindSpore AI 框架與各地人工智能計算中心的昇騰 AI 強大算力不斷發(fā)展基礎(chǔ)大模型和行業(yè)大模型的產(chǎn)業(yè)生態(tài),賦能千行百業(yè)數(shù)字化、智能化。