新聞中心

        EEPW首頁 > 智能計算 > 設計應用 > 數據中心面臨電力約束挑戰,推動GenAI終端發展

        數據中心面臨電力約束挑戰,推動GenAI終端發展

        作者:Gartner研究總監 曹夢琳 時間:2025-04-24 來源:EEPW 收藏


        本文引用地址:http://www.104case.com/article/202504/469796.htm

        生成式人工智能(GenAI)和大語言模型(LLM)的迅猛發展催生了空前的算力需求。隨著AI模型復雜度不斷提升,支撐其運行所需的能源已對造成巨大壓力。Gartner預測,到2027年,運行新增AI服務器所需的用電量將達到每年500太瓦時(TWh),是2023年的兩倍以上。GenAI不斷攀升的電力需求為運營帶來了成本、性能和可持續性等多重挑戰。

        Gartner預測,到2027年,40%的數據中心將因電力供應問題而面臨運營限制。這種情況不僅會影響數據中心自身,還會對其客戶和終端用戶產生連帶效應,導致成本上升、服務性能下降等問題。

        對于IT部門而言,GenAI日益增長的電力需求正成為關鍵制約因素,限制其部署GenAI相關產品和應用的能力。

        GenAI處理向終端轉移

        數據中心電力消耗所帶來的運營風險,將迫使產品負責人考慮將更多AI推理工作負載轉移至終端設備。目前,更高的響應速度和更好的數據隱私保護是終端GenAI的兩大優勢。如今,為應對數據中心電力限制的壓力,終端GenAI正在成為更具吸引力的解決方案。

        Gartner預測,到2026年,終端GenAI查詢量將超過云端,這標志著AI戰略的重大轉向。

        終端GenAI處理需重新設計關鍵技術

        隨著行業格局演變,產品負責人必須重新評估其AI戰略以適應這一轉向。評估如何優化推理方式,在終端分配GenAI工作負載至關重要。采用終端GenAI,企業不僅能緩解數據中心帶來的風險,還能提升整體用戶體驗。這一戰略轉向不僅可以幫助企業解決當前的電力挑戰,也讓企業在快速演進的AI環境中更好地應對未來需求。

        受改善用戶體驗(如增強數據隱私、降低延遲、加快響應速度)的需求驅動,GenAI正加速向智能手機、個人電腦(PC)、平板電腦、XR頭顯、可穿戴設備、車輛、機器人和物聯網設備等終端設備轉移。由于終端設備外形尺寸的限制,其搭載的GenAI處理需要極高的能源效率,同時不應因新增的GenAI功能而影響終端設備的續航時間和電池壽命。終端GenAI的發展需要半導體、電池以及AI模型開發領域的顯著協同創新。

        ●   半導體:高效節能芯片是實現實時處理和低延遲的關鍵。專為終端GenAI設計的專用AI處理器、低功耗存儲芯片,以及集成神經處理單元(NPU)的應用處理器和微控制器單元(MCU)成為首選方案。氮化鎵(GaN)等寬禁帶半導體在快充電源轉換中至關重要,可顯著提升用戶體驗。由于本地GenAI處理可能快速消耗電池電量,快充技術對于智能手機、PC等電池供電的終端設備至關重要,是保障其GenAI功能用戶體驗的關鍵因素。

        ●   電池:智能手機、PC、XR頭顯、可穿戴設備等大多數終端設備都依賴電池供電,而終端GenAI處理將消耗更多電量。固態鋰離子電池這類更高能量密度的電池,將成為支持更長續航時間的關鍵。

        ●   AI模型:終端設備的本地處理需要參數規模更小的定制化AI模型。參數更少的輕量化大語言模型適用于特定任務和行業,可降低計算需求,使其適合部署在無法運行標準“重型”LLM 的終端設備上。



        評論


        相關推薦

        技術專區

        關閉
        主站蜘蛛池模板: 洪雅县| 太康县| 西安市| 永泰县| 龙山县| 南昌县| 基隆市| 册亨县| 邢台县| 惠州市| 稻城县| 包头市| 理塘县| 宣汉县| 陆河县| 思茅市| 二连浩特市| 乐陵市| 江安县| 恩平市| 武汉市| 宁波市| 龙山县| 和龙市| 泗水县| 绥中县| 子洲县| 汶川县| 五大连池市| 阜新市| 大埔县| 奉贤区| 天柱县| 肇州县| 南岸区| 普兰店市| 罗定市| 太原市| 上饶县| 雅江县| 塔城市|