最新消息2026/07/14

中華顧問工程司「公路橋梁檢測人員培訓」今起跑

AI新知2026/07/13

從生成式AI到實體AI-日本鐵道落地驗證中

趨勢報告2026/06/26

12兆美元的數位防線

最新消息2026/05/15

中華技術150期上架-雲起智湧AI創生

AI新知2026/06/22

AI 興起引領的鐵道安全新革命

AI 算力新浪潮-從雲端巨獸到終端百花齊放

編輯部 2026-06-30

在生成式 AI 與 AI Agent(AI 代理)快速發展的時代,「算力」已成為推動人工智慧進步的重要基礎。究竟什麼是「AI 算力」?簡單來說,它就是人工智慧模型執行運算的能力,代表 AI 在完成訓練與推理時的速度,以及能夠處理問題的規模。不同於傳統中央處理器(CPU)擅長處理控制流程複雜、低延遲的通用運算,AI 模型(尤其是大型語言模型與深度學習模型)的主要運算,則由大量矩陣乘法與向量運算所組成,需要同時處理數百萬甚至數十億筆資料。這類高度平行的運算工作,通常仰賴 GPU(圖形處理器)或 NPU(神經網路處理單元)等專用晶片來加速執行。算力越高,AI 模型的訓練與推理效率越高,也能支援更大型、更複雜的人工智慧應用。

正因如此,AI 算力已逐漸成為各國發展數位經濟與科技競爭的重要戰略資源,被許多人譽為「新時代的石油」,也是衡量國家科技競爭力的重要指標之一。在 AI 時代,算力就是生產力。若一個國家具備充足的自主算力資源、完善的半導體供應鏈,以及優秀的人才與 AI 生態系,就更有機會在智慧製造、生醫製藥、國防安全、氣象預測等領域建立競爭優勢。以台灣為例,在全球半導體供應鏈中扮演關鍵角色,正是發展 AI 產業的重要基礎。然而,若過度依賴少數國家或科技企業所提供的 AI 基礎設施,也可能在關鍵技術、運算資源與數位服務上形成高度依賴。因此,近年來世界各國紛紛投入龐大資源建設 AI 算力中心、超級電腦與大型 GPU 叢集,希望建立自主 AI 基礎設施,將算力視為國家安全與經濟轉型的重要支柱。

從國家層面的競爭回到技術架構的演進,AI 算力正經歷一場「從雲到端」的重大變革。長期以來,雲端資料中心一直是 AI 算力的核心來源。當我們要求 AI Agent 執行複雜的推理、規劃或多步驟任務時,背後通常是由大量 GPU 所組成的雲端 AI 基礎設施提供運算支援。強大的雲端算力除了能處理大型模型推理之外,也能整合外部 API、資料庫及各種第三方工具,完成單一裝置無法負荷的複雜工作。然而,完全依賴雲端也可能帶來網路延遲、頻寬成本增加,以及敏感資料需傳送至遠端伺服器所衍生的隱私與安全挑戰。

為了解決這些問題,AI 算力正逐漸向終端裝置延伸。近年來的 AI PC、智慧型手機及各式智慧裝置,紛紛內建專為 AI 運算設計的 NPU,使部分 AI 任務能直接在本地端完成,例如語音辨識、即時翻譯、影像增強、照片搜尋、文字摘要,以及個人化助理等功能。透過終端算力,裝置能提供更低延遲、更流暢的使用體驗;同時,在不需要雲端模型協助的情況下,敏感的個人資料也能留存在裝置內部處理,進一步提升隱私保護與資料安全。

展望未來,AI 的發展將朝向「混合式算力(Hybrid Computing)」的架構演進,由雲端與終端各自發揮所長、協同合作。當使用者向 AI Agent 下達指令時,手機或 AI PC 可先完成本地即可處理的任務,例如語音喚醒、身分驗證或簡單的文字整理;若遇到需要大型模型推理、跨系統整合或大量資料分析的情境,再將工作交由雲端 AI 接手完成。換句話說,終端負責即時回應與個人化體驗,雲端則提供大規模運算與複雜推理能力,實際分工會依據模型大小、裝置效能、網路環境與任務需求動態調整。

未來,隨著雲端算力與終端 AI 持續融合,我們將迎來一個無所不在的智慧運算時代。AI 不再只是存在於遠端資料中心,而是逐步融入每一台手機、每一部電腦,以及各種智慧裝置之中。透過雲端與終端協同運作的混合式架構,AI Agent 將能以更快的反應速度、更高的運算效率,以及更完善的隱私保護,成為工作、生活與產業創新的重要夥伴,真正實現智慧代理無所不在的願景。

 


42

延伸閱讀

  • Generative AI(生成式 AI)—— 機器不只會算算術,還會寫詩畫畫

    幾年前,大眾普遍認為電腦最厲害的技能是精準的數學運算與大數據預報;誰能想到,今天...

    2026-06-16

    看更多
  • 「AI Agent(AI 代理人)—— 從「你問我答」到「放手讓它做」

    在過去幾年裡,大眾所熟知的 AI 互動模式(如初期的 ChatGPT),本質上屬...

    2026-06-15

    看更多