紅帽通過(guò)RHEL AI推動(dòng)開(kāi)源生成式AI創(chuàng)新的普及
● 這是首個(gè)通過(guò)紅帽靈活而成熟的企業(yè)訂閱模式提供支持、保障,并且開(kāi)源授權(quán)的IBM Granite大型語(yǔ)言模型(LLM)
● 向全球領(lǐng)先的企業(yè)級(jí)Linux平臺(tái)引入開(kāi)源的InstructLab模型對(duì)齊工具,旨在簡(jiǎn)化生成式AI模型的實(shí)驗(yàn)及調(diào)整對(duì)齊
● 在AMD、Intel和NVIDIA平臺(tái)上提供受支持的、企業(yè)就緒的模型運(yùn)行時(shí)環(huán)境,推動(dòng)基于開(kāi)源的AI創(chuàng)新
世界領(lǐng)先的開(kāi)源解決方案供應(yīng)商紅帽公司日前宣布推出紅帽企業(yè)Linux AI(RHEL AI)。這是一個(gè)基礎(chǔ)模型平臺(tái),能夠使用戶更加便捷地開(kāi)發(fā)、測(cè)試和部署生成式人工智能(GenAI)模型。RHEL AI整合了IBM研究院的開(kāi)源授權(quán)Granite大型語(yǔ)言模型(LLM)系列、基于大規(guī)模對(duì)話機(jī)器人對(duì)齊(LAB)方法的InstructLab模型對(duì)齊工具,以及通過(guò)InstructLab項(xiàng)目實(shí)施的社區(qū)驅(qū)動(dòng)模型開(kāi)發(fā)方法。該解決方案被封裝成一個(gè)優(yōu)化的、可啟動(dòng)的RHEL鏡像,用于在混合云環(huán)境中部署單個(gè)服務(wù)器,并已集成到OpenShift AI中。OpenShift AI是紅帽的混合機(jī)器學(xué)習(xí)運(yùn)營(yíng)(MLOps)平臺(tái),能夠在分布式集群環(huán)境中大規(guī)模運(yùn)行模型和InstructLab。
ChatGPT的推出極大地激發(fā)了社會(huì)對(duì)生成式AI的興趣,自那以來(lái),相關(guān)創(chuàng)新的步伐不斷加速。企業(yè)已從對(duì)生成式AI服務(wù)的初步評(píng)估轉(zhuǎn)向開(kāi)發(fā)并啟用AI的應(yīng)用程序。一個(gè)快速成長(zhǎng)的開(kāi)放模型生態(tài)系統(tǒng)進(jìn)一步促進(jìn)了AI的創(chuàng)新,并說(shuō)明了不會(huì)有一個(gè)獨(dú)占鰲頭的模型??蛻魧⑹芤嬗诙鄻踊倪x擇,從而滿足其特定需求,這一過(guò)程還將通過(guò)開(kāi)放創(chuàng)新的方式得到加速推進(jìn)。
實(shí)施AI策略遠(yuǎn)不止選擇一個(gè)模型那么簡(jiǎn)單。企業(yè)需要專業(yè)知識(shí)來(lái)為特定場(chǎng)景調(diào)整適當(dāng)?shù)哪P?,并且還必須處理AI實(shí)施過(guò)程中的顯著成本難題。數(shù)據(jù)科學(xué)技能的稀缺性,加之以下幾個(gè)方面的財(cái)務(wù)需求,使得情況更為復(fù)雜:
● 購(gòu)置AI基礎(chǔ)設(shè)施或使用AI服務(wù)
● 針對(duì)特定商業(yè)需求調(diào)整AI模型的復(fù)雜流程
● 將AI融入企業(yè)應(yīng)用
● 管理應(yīng)用程序及其模型的生命周期
為了真正降低進(jìn)入AI創(chuàng)新的門檻,企業(yè)需要擴(kuò)大參與AI項(xiàng)目的人員范圍,同時(shí)控制相關(guān)成本。通過(guò)使用InstructLab對(duì)齊工具、Granite模型和RHEL AI,紅帽致力于將自由獲取、重復(fù)利用、透明開(kāi)放以及鼓勵(lì)貢獻(xiàn)等開(kāi)源項(xiàng)目的優(yōu)勢(shì)應(yīng)用于生成式AI。
通過(guò)InstructLab在開(kāi)放環(huán)境中構(gòu)建AI
IBM研究院開(kāi)發(fā)了大規(guī)模對(duì)話機(jī)器人對(duì)齊(LAB)技術(shù),這是一種利用分類指導(dǎo)合成數(shù)據(jù)生成和創(chuàng)新的多階段調(diào)整框架的模型對(duì)齊方法。此方法通過(guò)減少對(duì)昂貴人工注釋和專有模型的依賴,使AI模型的開(kāi)發(fā)變得更加開(kāi)放和易于接觸。采用LAB方法,可以通過(guò)指定分類下的技能和知識(shí),大規(guī)模生成影響模型的合成數(shù)據(jù),并利用這些數(shù)據(jù)訓(xùn)練模型。
在意識(shí)到LAB方法能顯著提升模型性能后,IBM和紅帽決定推出InstructLab,這是一個(gè)圍繞LAB方法和IBM開(kāi)源Granite模型構(gòu)建的開(kāi)源社區(qū)。InstructLab項(xiàng)目的目標(biāo)是使開(kāi)發(fā)者通過(guò)簡(jiǎn)化LLM的創(chuàng)建、構(gòu)建和貢獻(xiàn)過(guò)程,像參與任何其他開(kāi)源項(xiàng)目一樣,將LLM開(kāi)發(fā)的權(quán)力交到開(kāi)發(fā)者手中。
在InstructLab的啟動(dòng)過(guò)程中,IBM還公開(kāi)發(fā)布了一系列精選的Granite英語(yǔ)和編程模型。這些模型在Apache許可證下發(fā)布,確保了對(duì)訓(xùn)練模型所用數(shù)據(jù)集的透明度。Granite 7B英語(yǔ)模型已整合到InstructLab社區(qū),最終用戶可以像對(duì)其他任何開(kāi)源項(xiàng)目那樣,共同貢獻(xiàn)技能和知識(shí),從而提升該模型。對(duì)于Granite編程模型,InstructLab將很快提供類似的支持。
在可信賴的Linux基礎(chǔ)上進(jìn)行開(kāi)源AI創(chuàng)新
RHEL AI沿用這種開(kāi)放式AI創(chuàng)新方法,融合了企業(yè)級(jí)就緒的InstructLab項(xiàng)目和Granite語(yǔ)言與代碼模型,及全球領(lǐng)先的企業(yè)級(jí)Linux平臺(tái),簡(jiǎn)化了混合基礎(chǔ)設(shè)施環(huán)境中的部署。這樣構(gòu)建了一個(gè)基礎(chǔ)模型平臺(tái),使開(kāi)源許可的生成式AI模型能夠被企業(yè)所使用。RHEL AI包括:
● 紅帽支持和保障的開(kāi)源許可Granite語(yǔ)言和代碼模型。
● 提供支持并具有生命周期管理的InstructLab分發(fā)版本,這是一種可擴(kuò)展且成本效益高的解決方案,能夠增強(qiáng)大型語(yǔ)言模型(LLM)的功能,并使知識(shí)與技能的貢獻(xiàn)得到更廣泛的用戶接納。
● 通過(guò)RHEL鏡像方式提供的優(yōu)化可啟動(dòng)模型運(yùn)行實(shí)例,包括Granite模型和InstructLab工具包,及優(yōu)化的Pytorch運(yùn)行時(shí)庫(kù)和針對(duì)AMD Instinct? MI300X、Intel和NVIDIA GPU以及NeMo框架的加速器。
● 紅帽提供的完整企業(yè)支持和生命周期保證,從可信的企業(yè)產(chǎn)品分發(fā)開(kāi)始,提供24小時(shí)全天候生產(chǎn)支持和擴(kuò)展的生命周期支持。
隨著各組織在RHEL AI上試驗(yàn)和調(diào)整新AI模型,他們可以通過(guò)紅帽O(jiān)penShift AI來(lái)擴(kuò)展這些工作流,OpenShift AI將包含RHEL AI,并利用OpenShift的Kubernetes引擎在大規(guī)模訓(xùn)練和部署AI模型,以及OpenShift AI的集成MLOps能力來(lái)管理模型的生命周期。IBM的watsonx.ai企業(yè)工作室建立在紅帽O(jiān)penShift AI上,RHEL AI一旦在OpenShift AI中可用,將帶來(lái)額外的企業(yè)AI開(kāi)發(fā)、數(shù)據(jù)管理、模型治理和性價(jià)比改進(jìn)的能力。
云是混合的,AI亦如此
過(guò)去三十多年,開(kāi)源技術(shù)不僅推動(dòng)了快速創(chuàng)新,還大幅降低了IT成本并降低了創(chuàng)新門檻。從21世紀(jì)初通過(guò)RHEL提供開(kāi)放式企業(yè)Linux平臺(tái),到通過(guò)紅帽O(jiān)penShift推動(dòng)容器和Kubernetes成為開(kāi)放式混合云和云原生計(jì)算的基礎(chǔ),紅帽幾乎一直引領(lǐng)著這一潮流。
紅帽在開(kāi)放混合云中賦能人工智能/機(jī)器學(xué)習(xí)戰(zhàn)略,支持人工智能工作負(fù)載在數(shù)據(jù)所在的地方運(yùn)行,無(wú)論是在數(shù)據(jù)中心、多個(gè)公有云或邊緣。除了支持工作負(fù)載外,紅帽的人工智能愿景還將模型訓(xùn)練和調(diào)整引向同一方向,以更好地應(yīng)對(duì)數(shù)據(jù)主權(quán)、合規(guī)和操作完整性等方面的限制。紅帽的平臺(tái)為這些工作負(fù)載提供跨環(huán)境的一致性,無(wú)論它們?cè)诤翁庍\(yùn)行,這對(duì)于順利推進(jìn)人工智能創(chuàng)新至關(guān)重要。
RHEL AI和InstructLab社區(qū)進(jìn)一步落實(shí)了這一愿景,消除了試驗(yàn)和構(gòu)建AI模型的多個(gè)障礙,提供了推動(dòng)下一代智能工作負(fù)載所需的工具、數(shù)據(jù)和概念。
上市時(shí)間
紅帽企業(yè)Linux AI目前已作為開(kāi)發(fā)者預(yù)覽版提供。在IBM云上已建立的GPU基礎(chǔ)設(shè)施用于訓(xùn)練Granite模型并支持InstructLab,現(xiàn)IBM云將增加對(duì)RHEL AI和OpenShift AI的支持。此整合將使企業(yè)能夠更輕松地將生成式AI部署至其關(guān)鍵任務(wù)應(yīng)用程序中。
支持證言
Ashesh Badani,紅帽高級(jí)副總裁兼首席產(chǎn)品官
“對(duì)企業(yè)來(lái)說(shuō),生成式AI(GenAI)代表了一次革命性的飛躍,但這需要企業(yè)真正部署起來(lái),并針對(duì)其具體業(yè)務(wù)需求使用AI模型。通過(guò)結(jié)合紅帽O(jiān)penShift AI的廣泛應(yīng)用,RHEL AI和InstructLab項(xiàng)目旨在降低混合云中生成式AI所面臨的多種挑戰(zhàn),從數(shù)據(jù)科學(xué)技能的限制到巨大的資源需求,同時(shí)促進(jìn)企業(yè)的部署并推動(dòng)上游社區(qū)的創(chuàng)新。”
Ramine Roane,AMD公司AI部門副總裁
“AI是過(guò)去五十年中技術(shù)最重要的變革之一。為了促進(jìn)AI更廣泛的采用,構(gòu)建AI應(yīng)用的模型和工具需要對(duì)企業(yè)可達(dá)。RHEL AI基于可信賴的Linux基礎(chǔ),配備開(kāi)源工具和模型,是支持此類需求的平臺(tái)之一,我們很高興支持紅帽利用我們的AMD技術(shù)推動(dòng)企業(yè)AI的進(jìn)步。”
Jeremy Foster,思科網(wǎng)絡(luò)-計(jì)算部門高級(jí)副總裁兼總經(jīng)理
“AI運(yùn)動(dòng)是企業(yè)的一次巨大變革,許多組織正在探索最佳前進(jìn)路徑。思科持續(xù)與紅帽緊密合作,推進(jìn)AI的采用,RHEL AI將通過(guò)提供開(kāi)源啟用的大型語(yǔ)言模型(LLM),作為企業(yè)就緒的Linux平臺(tái)的一部分來(lái)加速創(chuàng)新?!?/p>
Gil Shneorson,戴爾解決方案平臺(tái)高級(jí)副總裁
“戴爾一直在提供可靠和一致的基礎(chǔ)設(shè)施生命周期管理方面處于先驅(qū)地位;我們認(rèn)為,隨著系統(tǒng)的持續(xù)演化,為企業(yè)IT操作提供持續(xù)的、可靠和安全的系統(tǒng)更新至關(guān)重要。使組織能夠擴(kuò)展代碼更新并減少部署時(shí)間的新技術(shù),將是保持創(chuàng)新進(jìn)程的關(guān)鍵?!?/p>
Frances Guida,惠普企業(yè)計(jì)算解決方案和AI總監(jiān)
“HPE與紅帽合作了二十年,提供結(jié)合了HPE計(jì)算平臺(tái)和RHEL的行業(yè)領(lǐng)先解決方案。在快速增長(zhǎng)的技術(shù)領(lǐng)域如生成式AI中,開(kāi)放環(huán)境對(duì)創(chuàng)新至關(guān)重要,我們期待與RHEL AI和紅帽探索新的合作領(lǐng)域,助力惠普客戶取得成功?!?/p>
Darío Gil,IBM高級(jí)副總裁兼研究總監(jiān)
“真正的開(kāi)源創(chuàng)新引入AI模型開(kāi)發(fā),并利用廣闊的社區(qū)力量,將改變企業(yè)對(duì)AI采用和擴(kuò)展計(jì)劃的思考方式。IBM一直支持開(kāi)源社區(qū),支持了Linux、Apache和Eclipse等有影響力的社區(qū),我們與紅帽的合作是我們致力于構(gòu)建安全、負(fù)責(zé)任且高效AI的開(kāi)放方式的一大步。RHEL AI和InstructLab,結(jié)合IBM的開(kāi)源Granite模型家族,將為那些尋求為其特定用途構(gòu)建模型的客戶提供新的價(jià)值和選擇?!?/p>
Hillery Hunter,IBM基礎(chǔ)設(shè)施創(chuàng)新首席技術(shù)官兼總經(jīng)理
“許多企業(yè)都在努力將AI融入其關(guān)鍵任務(wù)應(yīng)用程序。RHEL AI和OpenShift AI在IBM云上的可用性將徹底改變社區(qū)和公司構(gòu)建及利用生成式AI的方式。我們正在促進(jìn)開(kāi)放合作,簡(jiǎn)化模型定制,并為將AI整合到每個(gè)應(yīng)用程序中提供企業(yè)級(jí)支持的模型和工具?!?/p>
Justin Hotard,英特爾數(shù)據(jù)中心及AI集團(tuán)執(zhí)行副總裁兼總經(jīng)理
“AI的廣泛采用需要完全開(kāi)源,社區(qū)成員應(yīng)該貢獻(xiàn)并創(chuàng)造新的應(yīng)用和使用案例。通過(guò)整合開(kāi)源的Granite模型和InstructLab項(xiàng)目,RHEL AI正為我們與生產(chǎn)中的AI模型的互動(dòng)方式、調(diào)整和最終使用中帶來(lái)重大變革。”
Kirk Skaugen,聯(lián)想ISG總裁
“部署AI驅(qū)動(dòng)應(yīng)用的客戶需要能在一個(gè)可信、熟悉但仍具創(chuàng)新性的平臺(tái)上測(cè)試和實(shí)驗(yàn)潛在模型。聯(lián)想認(rèn)為AI的未來(lái)是混合式的,我們視RHEL AI為廣泛混合AI創(chuàng)新的關(guān)鍵途徑,并通過(guò)紅帽O(jiān)penShift AI實(shí)現(xiàn)生產(chǎn)規(guī)模化。我們很高興與紅帽合作,在我們的ThinkSystem 8-GPU服務(wù)器上進(jìn)行聯(lián)合測(cè)試,推動(dòng)混合AI創(chuàng)新?!?/p>
Justin Boitano,NVIDIA企業(yè)產(chǎn)品副總裁
“紅帽和NVIDIA長(zhǎng)期以來(lái)一直保持緊密合作,紅帽企業(yè)Linux AI展示了我們共同致力于為開(kāi)發(fā)者和研究者提供全面的計(jì)算和軟件解決方案,幫助他們構(gòu)建下一波AI技術(shù)和應(yīng)用?!?/p>
評(píng)論