北京2024年9月29日 /美通社/ -- 9月27-29日，2024中國算力大會在鄭州舉行。會上，浪潮信息重磅發(fā)布元腦企智EPAI一體機，通過軟硬件高度協同的一體化設計，為客戶提供多元多模、簡單易用、本地部署、安全可靠的大模型開發(fā)平臺，顯著提高企業(yè)大模型以及AI原生應用的開發(fā)效率，加速大模型產業(yè)化落地。
大模型落地挑戰(zhàn)巨大
隨著大模型和生成式技術的飛躍式發(fā)展，基于大模型的應用創(chuàng)新正在成為新的主題，如何以大模型賦能現有的技術、業(yè)務，已成為企業(yè)在新一輪技術周期中保持競爭力的要素之一。但企業(yè)在應用大模型的過程中往往面臨著諸多挑戰(zhàn)，如生態(tài)離散導致的多元多模適配難，模型訓練和部署復雜、數據治理難、模型"幻覺"問題以及對專業(yè)技術人才的依賴等，導致大模型與行業(yè)場景的融合進展緩慢。
首先，多元多模適配難度大、周期長、成本高。不同場景、不同業(yè)務對模型能力的多樣需求，業(yè)務生產環(huán)境往往是多模并存的狀態(tài)，而由于芯片生態(tài)離散、特定應用加速等原因，所使用的算力資源也是多元并用的。因此，大模型應用開發(fā)需考慮與多元算力、多樣大模型的選擇、適配、組合調度等問題，難度大，周期長，成本高。
其次，巨大參數量級的通用大模型，很難直接用于復雜、離散的行業(yè)場景，各行業(yè)知識專業(yè)化程度高，可遷移性低，通用大模型本身難以覆蓋，所以經常出現大模型"幻覺"或是"胡言亂語"的問題，因此必須結合行業(yè)和企業(yè)專業(yè)數據進行再學習。
最后，要實現大模型與行業(yè)場景的深度結合，實現高效、高可靠、高質量的模型應用效果，涉及數據、微調、RAG、部署、上線和運維等極為復雜的流程，特別是數據治理和模型微調，需要具有豐富經驗的實施團隊才能勝任，技術門檻高。
元腦企智EPAI一體機，讓大模型開發(fā)快到飛起
對于大多數企業(yè)而言，大模型應用開發(fā)的系統(tǒng)性、復雜性，往往讓企業(yè)對大模型開發(fā)望而卻步。因此，實現大模型的深入行業(yè)應用與廣泛落地，關鍵在于如何有效提高AI應用創(chuàng)新的質量和效率，卓越的大模型及應用開發(fā)工具成為釋放智能生產力的關鍵。
浪潮信息元腦企智EPAI一體機基于專為大模型應用場景設計的元腦服務器，搭載了元腦企智EPAI企業(yè)大模型開發(fā)平臺，支持多元算力、多模管理、全鏈工具以及本地部署，可一站式解決數據處理、模型微調、RAG搭建、模型部署、應用上線和系統(tǒng)運維等環(huán)節(jié)開發(fā)難題，為客戶提供多元多模、簡單易用、本地部署、安全可靠的大模型應用開發(fā)平臺，滿足企業(yè)人工智能應用從開發(fā)到實施的全棧需求。
多元多模：元腦企智EPAI一體機具備多元算力和多模管理能力，通過大模型計算框架TensorGlue實現異構算力調度，通過算子基礎化技術實現上層模型算法和下層基礎設施的邏輯解耦，從而高效的屏蔽模型和芯片差異，降低企業(yè)跨算力平臺遷移、多元模型部署適配的試錯成本。目前，元腦企智EPAI一體機可以支持10+業(yè)界主流大模型計算框架，內置7個主流基礎大模型，預設了20+微調參數，用戶可以針對知識問答、智能編碼、文檔理解、智能助手等不同應用場景和任務需求，選擇最佳產品型號和模型算法，快速開發(fā)模型應用。
簡單易用：元腦企智EPAI一體機提供從數據準備、大模型微調、知識庫構建、大模型部署上線運維的全流程支持工具鏈。其中，針對數據準備，預先內置了上億條基礎知識數據以及自動化數據處理工具，支持10種以上企業(yè)常見的數據格式，并且以超過95%的抽取準確率，把這些數據轉化為知識庫以及可供模型進行微調的數據；針對大模型微調，采用低代碼可視化界面來進行微調，并且內置了Lora、SFT等多種微調框架以及20多種優(yōu)化參數，用戶可依據具體業(yè)務需求和數據特性，選擇最為合適的框架與技術，快速且低成本地構建起企業(yè)專屬大模型能力。
本地部署、安全可靠：由于大模型應用開發(fā)需要結合企業(yè)私有數據，要求企業(yè)數據不出域。本地部署可以確保用戶數據不被上傳至云端，避免數據泄露和濫用的風險，這在處理敏感信息或符合嚴格數據保護法規(guī)的行業(yè)中尤為重要。元腦企智EPAI一體機的本地化部署模式提供全鏈路的企業(yè)數據防護能力，設置多級過濾和審核體系，讓數據的流轉更安全，讓生成結果更可靠，構建起一個既能充分利用數據價值，又能保護用戶隱私、符合法規(guī)要求的安全數據處理環(huán)境，做到"數據可用不可見"。
元腦企智EPAI一體機能顯著提升大模型應用的開發(fā)效率，并極大節(jié)省人力成本。浪潮信息先行先試，采用1臺元腦企智EPAI一體機標準版，低代碼完成企業(yè)知識庫構建、模型微調、應用開發(fā)等工作，1人1月即簡單高效、低門檻地打造出智能售前助手"元小智"，賦能日常售前業(yè)務，實現智慧化變革，團隊工作效率提升3-5倍。
浪潮信息產品方案開發(fā)部總經理魏健表示，本次發(fā)布了基礎版、標準版、高級版、創(chuàng)新版和集群版五個版本，主要面向制造、金融等行業(yè)客戶、傳統(tǒng)ISV和SI三類用戶提供一站式大模型生產及應用全流程開發(fā)工具鏈，同時支持接入更多元腦伙伴的算法和模型能力，共同打造AI原生應用開發(fā)的"超級工作臺"，加速AI應用創(chuàng)新和落地。
