Mark Ku's Blog
在 ChatGPT 開啟在 Claude 開啟

2025 年 AI 趨勢聚焦 MCP 協議、AI Agent,以及搭載 128GB 記憶體的 NVIDIA DGX Spark 個人 AI 超級電腦,將加速 AI Agent 發展,改變軟體工程師工作模式。

Podcast 對話本文 AI 對話朗讀版
本文音訊由 VoAI 提供技術支援VoAI 絕好聲創

談談AI 的演進

談到 AI 的發展,我們就不得不聊聊AI 的演進
深度學習 1.0 > 大型語言模型 2.0 > 具身智能 3.0(Embodied Intelligence) AI evolution

我們現在身處第三個階段,作為開發者,我們應該持續關注 AI 3.0 技術的演進,尤其是以下兩大方向:

值得觀注

在我去語言學校進修的這段期間,AI 的發展一刻不停,以下這兩項技術在這段時間內快速竄紅,值得深入了解:

MCP(Model Context Protocol)

MCP 是一種由 Anthropic 提出的開放標準協議,旨在為大型語言模型(LLMs)提供一個統一的介面,使其能夠與各種外部系統與工具進行連接與互動。
它就像 AI 應用中的 USB-C 接口:安全、標準化地讓 AI 模型能夠存取外部資料與工具,進一步拓展模型的能力與應用場景。

舉例來說

  • 像是 依據公司的程式碼標準 code review
  • 依據 公司的文件規範檢查文件或檢查合約

AI Agent(智慧代理人)

AI Agent 是結合大型語言模型與工具操作能力的智能系統,它不只回應使用者輸入,而是能理解任務、規劃步驟、自主執行,甚至具有記憶與學習能力,我想未來AI Agent 會漸漸觀察環境,並具備目標導向與行動能力的 AI,可以主動完成任務,而不只是被動回應。

AI agent
AI agent

我的實驗起點:用 4070 Super 玩開源大模型

2024 年,我入手了一張 NVIDIA 4070 Super 顯示卡,開始嘗試在家裡跑開源的大語言模型,這張卡雖然算是中高階家用卡,但受到顯示卡記憶體限制,只能跑像 **7B(70 億參數)**這類「閹割版」的小模型。

像是

  • 7B 模型大致能應付文字生成
  • 13B 模型則勉強可用來寫程式碼

雖然在本地離線開源模型,這樣的顯示卡還算堪用,但離真正商用或訓練模型仍有距離,這類家用卡的應用,侷限於小型場景,像是開發測試、個人學習用途等等。

比較值得觀注,開源大型框架和模型

Agent 框架

  • LangChain Agents
  • N8N
  • CrewAI

開源模型

關鍵轉捩點:個人 AI 超級電腦登場

顯示卡記憶體一直是個問題,所以大陸很多人在魔改顯卡記憶體,我想顯示晶片的公司也很清楚,如果加大記憶體,會導致高階顯卡銷售不好,在切一個人AI 電腦產品線,就不會自己的產品互相打到。

於是就在 2025 年 3 月 22 日,NVIDIA 在 GTC 大會上發表了革命性的產品個人 AI 超級電腦 DGX Spark

這款設備搭載 NVIDIA 與聯發科合作開發的 GB10 超級晶片,擁有 128GB 記憶體,體積僅約一支 iPhone 的長寬,外型香檳金十分吸睛,售價約新台幣 13 萬元,並已開放預購。

這台機器的問世,有望突破傳統家用或工作站顯示卡顯示卡記憶體不足的瓶頸,可直接支援大型模型,為 AI Agent 的發展加速鋪路

DGX Spark 有點類似蘋果的「統一記憶體架構(Unified Memory Architecture)」,可以在不同運算單元之間高效共享記憶體。雖然蘋果也能透過主機來運行更大型的模型,但它在回應時的 token 數量仍然偏少,限制了實際的應用彈性。

軟體工作的未來 - 從寫程式到訓練智慧代理人

當每家企業都能在自己的環境中部署大型語言模型,不只用來做推論,甚至可以調整和訓練模型,軟體工程師的工作定義將會改變,像是過去軟體工程師主要是「維護系統」,未來會變成「設計和管理智慧代理人」,將 AI 深度融入各行各業,徹底改變工作流程和服務方式。

AI 代理人以大型語言模型為核心,結合任務規劃、工具操作和記憶系統等功能,目前 AI 代理人多是被動回應,未來則有機會變得更主動,能自主處理問題、做決策和執行行動。

作者

Mark Ku

擁有 10+ 年經驗的資深軟體工程師,現為 AI 應用 Builder,專注於大型平台架構與簡化複雜系統設計,從電商系統到訂閱與收費平台,結合 AI Agent、AI 整合與自動化開發,打造高效率且可持續演進的產品技術基礎。閱讀更多

覺得這篇有幫助?

作者做的免費工具、每日 Podcast 與電子報,都在這裡。

Mark Ku · 本文採用 CC BY 4.0 授權,轉載請註明作者並附上原文連結。

留言

訂閱電子報

訂閱後即時收到新文章通知,不錯過任何技術分享。

提交即表示同意接收電子報,隨時可

熱門文章

View all
Mark Ku
··640

Oracle Cloud 永久免費方案 Linux 主機及固定 IP :0 元打造雲端解決方案

Oracle Cloud 永久免費方案 Linux 主機及固定 IP :0 元打造雲端解決方案
Mark Ku
··549

告別 Postman 收費陷阱!開源 Git 原生 API 測試神器 Bruno 實戰指南

告別 Postman 收費陷阱!開源 Git 原生 API 測試神器 Bruno 實戰指南
Mark Ku
··329

一款免費開源類似於 Notion 類知識庫系統 — Outline Wiki 佈署與備份全攻略

一款免費開源類似於 Notion 類知識庫系統 — Outline Wiki 佈署與備份全攻略
Mark Ku
··264

訓練自己的 AI 語音:硬體門檻、開源模型比較與 LoRA 微調

訓練自己的 AI 語音:硬體門檻、開源模型比較與 LoRA 微調
Mark Ku
··230

打造高效 API 管理平台:從 0 開始部署 Kong Gateway - Part 1

打造高效 API 管理平台:從 0 開始部署 Kong Gateway - Part 1
Mark Ku
··220

在 Ubuntu 上設置 Samba 來共享資料夾,讓 Windows 11 用戶可以存取

在 Ubuntu 上設置 Samba 來共享資料夾,讓 Windows 11 用戶可以存取