北京2024年3月20日 /美通社/ -- 亞馬遜云科技和英偉達(dá)宣布，英偉達(dá)在2024年GTC大會上推出的新一代NVIDIA Blackwell GPU平臺即將登陸亞馬遜云科技。亞馬遜云科技將提供NVIDIA GB200 Grace Blackwell Superchip和 B100 Tensor Core GPU，這一舉措延續(xù)了雙方長期的戰(zhàn)略合作伙伴關(guān)系，旨在為客戶提供安全、先進(jìn)的基礎(chǔ)設(shè)施、軟件及服務(wù)，助力客戶開啟新一代生成式AI的能力。
英偉達(dá)與亞馬遜云科技繼續(xù)匯聚各自的領(lǐng)先技術(shù)，包括具備英偉達(dá)最新多節(jié)點系統(tǒng)的下一代NVIDIA Blackwell平臺和AI軟件，以及亞馬遜云科技的Nitro系統(tǒng)、具備領(lǐng)先安全性的Amazon KMS密鑰管理服務(wù)、千萬億比特級的Elastic Fabric Adapter（EFA）網(wǎng)絡(luò)和Amazon EC2 UltraCluster超大規(guī)模集群等技術(shù)。基于上述技術(shù)打造的基礎(chǔ)設(shè)施和工具，使客戶能夠在Amazon EC2上以更快速度、更大規(guī)模、更低成本地對其構(gòu)建和運(yùn)行數(shù)萬億參數(shù)的大型語言模型（LLMs）進(jìn)行實時推理，性能相較于配備前一代英偉達(dá)GPU的EC2實例有顯著改進(jìn)。
亞馬遜云科技首席執(zhí)行官Adam Selipsky表示：“我們雙方的深入合作可以追溯到13年前，當(dāng)時我們共同推出了世界上第一個亞馬遜云科技上的GPU云實例，而今天我們?yōu)榭蛻籼峁┝俗顝V泛的英偉達(dá)GPU解決方案。英偉達(dá)的下一代Grace Blackwell處理器是生成式AI和GPU計算領(lǐng)域的標(biāo)志性事件。當(dāng)結(jié)合亞馬遜云科技強(qiáng)大的EFA網(wǎng)絡(luò)、Amazon EC2 UltraClusters的超大規(guī)模集群功能，以及我們獨有的Amazon Nitro高級虛擬化系統(tǒng)及其安全功能時，我們就能夠使客戶更快、更大規(guī)模且更安全地構(gòu)建和運(yùn)行具有數(shù)萬億參數(shù)的大型語言模型。”
英偉達(dá)創(chuàng)始人兼首席執(zhí)行官黃仁勛表示：“人工智能正在以前所未有的速度推動新應(yīng)用、新商業(yè)模式和跨行業(yè)的創(chuàng)新。我們與亞馬遜云科技的合作正在加速新的生成式AI能力的發(fā)展，并為客戶提供前所未有的計算能力，以開創(chuàng)無限可能。”
亞馬遜云科技與英偉達(dá)的新合作將顯著加快超萬億參數(shù)前沿大型語言模型的訓(xùn)練
亞馬遜云科技將提供配置GB200 NVL72的英偉達(dá)Blackwell平臺，它配備72顆Blackwell GPU和36顆Grace CPU，通過第五代NVIDIA NVLink?互連。當(dāng)與亞馬遜云科技強(qiáng)大的EFA網(wǎng)絡(luò)、Amazon Nitro高級虛擬化系統(tǒng)和Amazon EC2 UltraClusters超大規(guī)模集群等技術(shù)結(jié)合時，客戶能夠輕松擴(kuò)展至數(shù)千個GB200 Superchips。英偉達(dá)Blackwell在亞馬遜云科技上的應(yīng)用，使得該平臺在應(yīng)對資源密集型和數(shù)萬億參數(shù)語言模型等推理工作負(fù)載加速方面實現(xiàn)了巨大飛躍。
基于此前搭載英偉達(dá)H100的Amazon EC2 P5實例的成功（客戶短期使用這些實例可通過Amazon EC2 Capacity Blocks for ML功能），亞馬遜云科技計劃提供配備B100 GPUs新的Amazon EC2實例，并支持在Amazon EC2 UltraClusters中部署以加速超大規(guī)模生成式AI的訓(xùn)練和推理。GB200也將在NVIDIA DGX? Cloud上可用，這是一個在亞馬遜云科技上雙方共同開發(fā)的AI平臺，為企業(yè)開發(fā)者提供了構(gòu)建和部署先進(jìn)生成式AI模型所需的專用基礎(chǔ)設(shè)施和軟件。在亞馬遜云科技上推出的基于Blackwell的DGX Cloud實例將加速前沿生成式AI和超過1萬億參數(shù)的大語言模型的開發(fā)。
提升AI安全性：亞馬遜云科技Nitro系統(tǒng)、Amazon KMS、EFA加密與Blackwell加密技術(shù)緊密集成
隨著AI技術(shù)應(yīng)用越來越廣泛，企業(yè)需要確信，在整個訓(xùn)練流程中，他們的數(shù)據(jù)都得到了安全的處理。保護(hù)模型權(quán)重的安全至關(guān)重要，模型權(quán)重是模型在訓(xùn)練過程中學(xué)習(xí)到的參數(shù)，對于模型做出預(yù)測的能力至關(guān)重要。確保模型權(quán)重的安全對保護(hù)客戶的知識產(chǎn)權(quán)、防止模型被篡改以及維護(hù)模型的完整性都是非常重要的。
亞馬遜云科技的AI基礎(chǔ)設(shè)施和服務(wù)已經(jīng)實現(xiàn)了安全特性，使客戶能夠控制其數(shù)據(jù)，并確保數(shù)據(jù)不會與第三方模型提供者共享。Amazon Nitro系統(tǒng)和英偉達(dá)GB200的結(jié)合將能夠阻止未授權(quán)個體訪問模型權(quán)重，從而把AI安全性提升到新的高度。GB200支持對GPU之間NVLink連接進(jìn)行物理加密，以及對Grace CPU到Blackwell GPU的數(shù)據(jù)傳輸進(jìn)行加密，同時EFA也能夠?qū)Ψ?wù)器之間的分布式訓(xùn)練和推理過程的數(shù)據(jù)進(jìn)行加密。GB200還將受益于Amazon Nitro系統(tǒng)，該系統(tǒng)將主機(jī)CPU/GPU的I/O功能卸載至專門的硬件上，以提供更加一致的性能，其增強(qiáng)的安全性可以在客戶端和云端全程保護(hù)客戶的代碼和數(shù)據(jù)在處理過程中的安全。這一獨有的功能已經(jīng)獲得了領(lǐng)先的網(wǎng)絡(luò)安全公司 NCC Group 的獨立驗證。
通過在Amazon EC2上使用GB200，亞馬遜云科技將使客戶能夠使用Amazon Nitro Enclaves和Amazon KMS，在其EC2實例旁創(chuàng)建一個可信執(zhí)行環(huán)境。Amazon Nitro Enclaves允許客戶使用Amazon KMS控制下的密鑰來加密他們的訓(xùn)練數(shù)據(jù)和權(quán)重。從GB200實例內(nèi)部可以加載安全區(qū)（enclave），并且可以直接與GB200 Superchip通信。這使得Amazon KMS能夠以加密安全的方式直接與安全區(qū)通信，并直接傳遞密鑰材料。然后，安全區(qū)可以將該材料傳遞給GB200，這樣做能夠保護(hù)客戶實例中的數(shù)據(jù)，防止亞馬遜云科技操作人員訪問密鑰或解密訓(xùn)練數(shù)據(jù)或模型權(quán)重，從而賦予客戶對其數(shù)據(jù)的無與倫比的控制權(quán)。
“Ceiba項目”利用Blackwell在亞馬遜云科技上推動英偉達(dá)未來生成式AI創(chuàng)新
在2023年亞馬遜云科技re:Invent大會上宣布的“Ceiba項目”，是英偉達(dá)與亞馬遜云科技合作建造的世界上最快的AI超級計算機(jī)之一。這臺專為英偉達(dá)自身的研究和開發(fā)而設(shè)的超級計算機(jī)，獨家托管在亞馬遜云科技上。這臺首創(chuàng)的擁有20,736顆GB200 GPU的超級計算機(jī)，采用新型NVIDIA GB200 NVL72配置構(gòu)建，其特有的第五代NVLink將連接10,368顆NVIDIA Grace CPU。系統(tǒng)通過亞馬遜云科技第四代EFA網(wǎng)絡(luò)進(jìn)行擴(kuò)展，為每個Superchip提供高達(dá)800 Gbps的低延遲、高帶寬網(wǎng)絡(luò)吞吐量——能夠處理高達(dá)414 exaflops的AI計算量，與之前計劃在Hopper架構(gòu)上構(gòu)建Ceiba相比，性能提升了6倍。英偉達(dá)的研發(fā)團(tuán)隊將利用Ceiba推進(jìn)大語言模型、圖形（圖像/視頻/3D生成）與仿真、數(shù)字生物學(xué)、機(jī)器人技術(shù)、自動駕駛汽車、NVIDIA Earth-2氣候預(yù)測等領(lǐng)域的AI技術(shù)，以幫助英偉達(dá)推動未來生成式AI的創(chuàng)新。
亞馬遜云科技與英偉達(dá)的合作推動生成式人工智能應(yīng)用開發(fā)及醫(yī)療健康與生命科學(xué)領(lǐng)域的應(yīng)用進(jìn)展
亞馬遜云科技與英偉達(dá)聯(lián)手，通過Amazon SageMaker與NVIDIA NIM推理微服務(wù)的整合，提供了高性能、低成本的生成式AI推理解決方案，該服務(wù)作為NVIDIA AI企業(yè)版的一部分提供?？蛻艨梢岳眠@一組合在Amazon SageMaker中快速部署和運(yùn)行已預(yù)編譯且對NVIDIA GPU進(jìn)行優(yōu)化的基礎(chǔ)模型，縮短生成式AI應(yīng)用的推出時間。
亞馬遜云科技與英偉達(dá)還在利用計算機(jī)輔助的藥物發(fā)現(xiàn)領(lǐng)域進(jìn)行合作拓展，推出了新的NVIDIA BioNeMo?基礎(chǔ)模型，用于生成化學(xué)、蛋白質(zhì)結(jié)構(gòu)預(yù)測，以及理解藥物分子與目標(biāo)的相互作用。這些新模型將很快在Amazon HealthOmics上提供，這是一個專為幫助醫(yī)療保健和生命科學(xué)組織存儲、查詢和分析基因組、轉(zhuǎn)錄組及其他組學(xué)數(shù)據(jù)而設(shè)計的專用服務(wù)。
Amazon HealthOmics和英偉達(dá)醫(yī)療保健團(tuán)隊還合作推出生成式AI微服務(wù)，以推進(jìn)藥物發(fā)現(xiàn)、醫(yī)療技術(shù)和數(shù)字健康領(lǐng)域的發(fā)展，該服務(wù)提供一個新的GPU加速的云端服務(wù)目錄，涵蓋生物學(xué)、化學(xué)、成像和醫(yī)療保健數(shù)據(jù)，以便醫(yī)療企業(yè)能夠在亞馬遜云科技上利用生成式AI的最新成果。
