深入探討 Nvidia 的 GPU 如何提升 HPE AI 伺服器性能的技術細節。了解這種強大合作關係的優勢和好處。
輝達(Nvidia)與惠普企業(HPE)的合作代表了企業AI運算領域的一個重要里程碑,標誌著雙方迄今為止最深入的技術整合。兩家公司推出了名為"Nvidia AI Computing by HPE"的全面性AI解決方案組合,預計將於2024年第三季度推出。
技術整合
硬體組件
這項合作包含多款搭載輝達先進GPU技術的惠普企業伺服器:
- ProLiant DL380a Gen12,配備八個H200 NVL Tensor Core GPU
- DL384 Gen12,配備GH200 NVL2加速器
- Cray XD670,配備八個H200 NVL Tensor Core
軟體與基礎設施
合作整合了以下元素:
- 輝達AI企業級軟體平台
- 輝達推理微服務(NIM)
- HPE AI Essentials軟體
- 輝達Spectrum-X乙太網路
- HPE GreenLake雲端和檔案儲存
市場影響
考慮到輝達在AI運算領域的主導地位,這項合作具有重大的市場意義。目前輝達供應約90%的AI工作負載GPU,其第一季度營收同比增長262%,達到260億美元。
策略重要性
這項合作不僅僅是硬體整合。它是一個只需三次點擊即可運行的私有雲AI解決方案,免除了客戶自行組裝不同組件的需求。業界合作夥伴將這項合作視為"遊戲規則改變者",預期未來幾年HPE的AI業務將增長兩到三倍。
實際應用
這項合作的影響已在日本顯現,惠普企業將向日本產業技術總合研究所(AIST)供應價值2億美元的輝達驅動AI伺服器。
惠普企業(HPE)的私有雲AI解決方案在市場上具有以下獨特優勢:
技術優勢
完整堆疊整合
- 這是業界首個完整堆疊的AI私有雲解決方案,與輝達(NVIDIA)深度整合
- 提供一鍵式部署功能,可在幾秒鐘內操作虛擬助手
- 通過HPE GreenLake雲端提供可擴展的自助服務體驗
安全性與控制
- 提供企業級數據隱私、安全性和治理要求的控制
- 支持推理、微調和RAG AI工作負載,可使用專有數據
- 相比公共雲服務,能更好地保護敏感數據
市場定位
市場規模與增長
- 整體雲端AI市場預計從2024年的803億美元增長到2029年的3,271.5億美元
- 私有雲市場預計從2024年的1,248億美元增長到2029年的1,909億美元
競爭優勢
- 通過與輝達的深度合作,提供最先進的AI計算基礎設施
- 提供低代碼或無代碼應用程序的解決方案加速器
- 能夠顯著縮短AI項目從試點到完整部署的時間
實用性
企業應用
- 提供多種規模配置,適合不同規模企業的需求
- 支持多種AI工作負載和使用案例
- 通過整合的基礎設施和數據管理工具,加快原型設計和測試速度
惠普企業(HPE)與輝達(NVIDIA)的整合為AI功能帶來了重大突破:
技術整合深度
硬體整合
- 整合了輝達完整AI運算堆疊,包括GPU運算、網路和軟體系統
- 結合HPE的AI儲存、運算能力和GreenLake雲端平台
- 支援大規模AI模型和高效能運算(HPC)任務
軟體生態系統
- 整合輝達AI企業套件和NIM推理微服務
- 採用OpsRamp AI副駕駛,提供完整的生命週期管理
- 提供GPU層級的可視性和操作效率
市場優勢
部署便利性
- 提供一站式私有雲AI解決方案
- 四種不同配置可供選擇,滿足不同規模企業需求
- 通過自助服務雲端體驗實現快速部署
合作夥伴網絡
- 與全球系統整合商(如Deloitte、HCLTech、Infosys、TCS等)建立合作關係
- 提供共同的市場開發資金支持
- 擴大AI解決方案的可及性,不再侷限於大預算企業
創新價值
這項整合使企業能夠專注於開發新的AI使用案例,提高生產力並開闢新的收入來源,同時確保專有數據的安全性。這代表了企業AI運算領域最深度的技術整合,為AI的未來發展奠定基礎。
HPE's strategy with Nvidia's Blackwell server
HPE展現了與輝達Blackwell伺服器的全面戰略布局:
產品創新
伺服器產品線
- Cray EX154n平台可支援多達224個Blackwell GPU,為業界最高密度配置
- 每個機櫃可提供超過10 petaFLOPS的FP64運算能力和4.4 exaFLOPS的FP4 AI運算能力
- 採用全新的無風扇液冷技術,可處理高達300kW的運算功率
網路升級
- 推出Slingshot 400互連技術,將頻寬從200提升到400 Gbps
- 提供自動化擁塞管理和自適應路由功能,實現超低延遲
技術整合
軟硬體協同
- 與輝達共同開發完整的生成式AI解決方案
- 整合HPE Ezmeral統一分析軟體和AI軟體套件
- 提供企業級RAG參考架構
未來發展
- 承諾開發基於新一代Blackwell平台的產品
- 計劃推出搭載GB200 Grace Blackwell Superchip的新產品
- 將支援HGX B200和HGXB100架構
這些戰略部署顯示HPE正積極擴大其在AI運算市場的影響力,並通過與輝達的深度合作保持技術領先地位。
The market share of HPE in Nvidia's Blackwell server, list in table
時間段 | 市場佔比和出貨細節 |
---|---|
2024 Q3 | Blackwell平台開始進入市場 |
2024 Q4 | Blackwell平台佔高端GPU市場不到10% |
2024年底 | 首先推出NVL36配置進行初步試驗 |
2025年 | 主要雲端服務商(微軟、Meta、AWS)預計出貨超過30,000機架 |
特別說明:
- HPE作為主要伺服器品牌,2024上半年的GPU需求將擴大到19%的市場份額
- HPE已承諾支援新一代Blackwell平台,包括GB200 Grace Blackwell Superchip
- HPE將支援NVL72和NVL36兩種配置,其中NVL72是NVIDIA主推的配置
What is HPE's market share in the Blackwell server compared to other server brands
以下是HPE和其他品牌在Blackwell伺服器市場的佔有率比較:
品牌/客戶類型 | 市場佔有率/預期出貨量 |
---|---|
雲端服務商 (Microsoft, Meta, AWS) | 預計2025年超過30,000機架 |
HPE | 2024上半年GPU伺服器整體佔比19% |
Dell | 整體伺服器OEM出貨量佔19.3% |
其他二線數據中心 | 佔總需求31% |
重要市場趨勢
時程安排
- Blackwell平台將於2024年第三季進入市場
- 2024年第四季預計佔高端GPU市場不到10%
- 完整產能預計要到2025年才會實現
市場定位
HPE在高效能運算領域具有優勢,特別是在科學研究和氣候建模等企業級工作負載方面。通過收購Cray系統,HPE在高效能AI基礎設施領域建立了領導地位。
How does the Blackwell server's performance influence HPE's revenue from AI systems
HPE的AI系統營收呈現顯著增長,但目前尚未反映Blackwell伺服器的具體影響,因為該產品線將於2024年第三季才開始進入市場。以下是當前的營收表現:
最新財務數據
AI系統營收增長
- AI系統營收從上一季度翻倍增長至超過9億美元
- 累計AI訂單達到46億美元
- 企業AI客戶數量同比增長三倍
整體伺服器業務
- 伺服器部門收入增長35%,達到43億美元
- AI系統訂單在一個季度內從46億美元增長到62億美元
- AI系統季度營收達到13億美元
未來展望
供應鏈改善
- AI伺服器交付時間已縮短至6-12週
- GPU供應改善有望推動2024財年下半年收入持續增長
值得注意的是,雖然AI伺服器銷售強勁,但對HPE的利潤率產生了一定的通縮影響,導致股價在延長交易時段下跌3%。
What are the key factors driving the demand for HPE's Blackwell server
以下是推動HPE Blackwell伺服器需求的關鍵因素:
市場需求動力
AI伺服器市場增長
- AI伺服器市場價值預計在2024年超過1,870億美元,成長率達69%
- AI伺服器佔整體伺服器市場的65%
- 2024年AI伺服器出貨量預計達167萬台,年增長41.5%
供應鏈改善
- GPU供應短缺情況在2024年第二季度明顯改善
- NVIDIA H100的交付時間從40-50週縮短至16週以內
- TSMC、SK hynix等廠商擴大產能
技術優勢
效能提升
- Blackwell晶片尺寸是H100的兩倍,提供更強大的運算能力
- 記憶體容量從H100的80GB HBM3提升到B200的288GB HBM3e
- 採用第二代Transformer引擎,加速生成式AI工作負載
散熱創新
- 配備直接液冷技術,提高能源效率
- 支援八個NVIDIA H200 SXM Tensor Core GPU或Blackwell GPU的散熱需求
市場策略
客戶需求
- 企業級客戶數量持續增長
- 第二線數據中心和政府部門的需求預計在2024年提升至50%
- 私有雲AI和主權雲需求增加
以下是HPE與其他AI伺服器供應商的表現比較:
主要業績指標
股票表現排名
- Dell領先,成長75.5%
- IBM次之,成長33%
- HPE表現穩健,成長27%
- 其他競爭對手呈現負成長
獲利能力分析
- IBM以56.3%的利潤率居首
- 思科和聯想分別為19%和15.7%
- HPE維持11.1%的健康利潤率
- Dell最低,為3.63%
估值觀點
- HPE的本益比為15.36,顯示相對合理的估值
- IBM本益比最高,達33.39
- 聯想本益比最低,為12.68
HPE市場定位
HPE展現均衡的表現:
- 股票成長強勁
- 中等水平的利潤率
- 合理的本益比,反映公平的市場估值
這些指標顯示HPE在AI伺服器市場保持競爭力,同時維持穩健的財務狀況。