你有冇試過用 ChatGPT 或者 Midjourney,每個月比緊 USD $20 甚至更多?我有。

直到半年前,我決定試下將呢啲月費 Cut 晒,全部轉用開源模型自建。結果唔單止慳咗錢,仲發現開源模型嘅表現已經唔輸畀商業方案——某啲場景甚至仲好用。

今日同你分享呢半年我由「月費用家」轉做「自建玩家」嘅完整經驗,無論你係開發者定係普通用家,都可以搵到適合你嘅方案。


2026 年開源 AI 嘅三大突破

如果你仲停留喺「開源 AI = 質素差、難用、要識寫 Code」嘅印象,咁你要更新一下認知。2026 年頭六個月,開源生態發生咗三件大事:

1. Llama 4 全面開放

Meta 喺今年初釋出嘅 Llama 4 系列,唔單止免費商用,仲有 8B、70B 同 405B 三個規模。其中 Llama 4 70B 喺多項 benchmark 上已經超越 GPT-4o,仲要係完全開源。

2. Mistral Large 2 成本效益稱王

法國 Mistral AI 推出嘅 Mistral Large 2,喺推理同 coding 能力上極之出色。最正係佢有128K context window,文件分析能力超強。而家用佢嘅 API 成本只係 GPT-4o 嘅三分之一。

3. Flux 取代 Stable Diffusion 成為新標準

Black Forest Labs 開源嘅 Flux.1 模型,喺文字理解、手指生成、排版能力上完全碾壓咗 SDXL。而家用消費級 GPU(RTX 4090)已經可以本地行 Flux,生成質素同 Midjourney 不相伯仲。


方法一:完全本地自建(適合有 GPU 嘅用家)

如果你屋企有張 RTX 3060 或以上嘅顯示卡,你完全可以喺自己部電腦行開源 LLM。

硬件基本要求

模型規模 最少 VRAM 建議 VRAM 速度
7B-8B 6GB 8GB+ 流暢
13B-14B 10GB 16GB+ 正常
30B-34B 20GB 24GB+ 較慢
70B+ 32GB 48GB+ 需要量化

推薦工具

Ollama — 最簡單嘅開源 LLM 運行工具

# 安裝 Ollama(Mac / Linux / Windows 都支援)
curl -fsSL https://ollama.com/install.sh | sh

# 下載並運行 Llama 4 8B(只需 4 步)
ollama pull llama4:8b
ollama run llama4:8b

就係咁簡單。裝完之後你有一個同 ChatGPT 差唔多嘅對話介面,完全離線、完全免費。

Open WebUI — 可視化操作介面 如果你唔鍾意打 Command,裝 Open WebUI 就有個靚仔介面:

docker run -d -p 3000:8080 --name open-webui ghcr.io/open-webui/open-webui:main

然後你 browser 打開 http://localhost:3000,就可以好似用 ChatGPT 咁用開源模型。

本地生成圖像

ComfyUI 配合 Flux 模型:

git clone https://github.com/comfyanonymous/ComfyUI
cd ComfyUI
pip install -r requirements.txt
python main.py

打開 browser 去 http://localhost:8188,你就有個同 Midjourney 差唔多嘅圖像生成工具。


方法二:雲端平價 API(適合冇 GPU 嘅用家)

冇 GPU 完全唔係問題。2026 年開源模型嘅 API 服務選擇好多,價錢仲好抵:

服務商 模型 每百萬 Token 收費 特點
Groq Llama 4 70B $0.59 極快(LPU 硬件加速)
Together AI Mistral Large 2 $0.80 超大 Context
DeepInfra Qwen 3 72B $0.50 中文表現最好
Fireworks Llama 4 8B $0.20 最平選擇

實際比較:我每個月大概用 500 萬 Token(約等於 3-4 本小說嘅內容),用 Together AI 嘅 Mistral Large 2,每月成本大約 USD $4。相比之前畀 ChatGPT Plus USD $20,慳咗 80%。


方法三:開源模型嘅殺手鐧應用

1. 私人文件助手

我最常用嘅場景:將公司合約、會議紀錄、技術文件全部放入本地 RAG 系統。

技術組合:Ollama + AnythingLLM

  • 支援 PDF、Word、Markdown、網頁
  • 完全離線,資料唔會送出街
  • 可以用嚟做客服知識庫

2. 自動化寫作助手

用開源 LLM 搭配 n8n 自動化:

  • 自動摘要每日新聞
  • 生成 Blog 文章初稿(呢篇文章都係用開源 LLM 輔助寫嘅)
  • 翻譯外電內容

3. 本地圖像生成

用 Flux + ComfyUI 做嘅日常應用:

  • 生成 Blog 封面圖(你見到嘅封面就係 Flux 生成嘅)
  • 產品 mockup
  • 社交媒體素材
  • 所有版權都屬於你,冇額外授權限制

開源 vs 商業:我嘅真實比較

比較項目 開源方案(自建) 商業方案(ChatGPT/Midjourney)
每月成本 $0-$10 $20-$200
私隱 完全離線 資料送上雲端
自訂能力 可以 Fine-tune 有限制
即用程度 要少少技術 開箱即用
質素(2026) 已追平 依然頂尖

結論:如果你有少少技術底,開源方案絕對值得試。就算你完全唔識技術,用 Groq 嗰類 API 服務都已經可以享受到開源模型嘅好處,仲要平好多。


常見錯誤與迷思

迷思一:「開源模型好難裝」

真相:Ollama 嘅安裝唔難過裝 WhatsApp。一個 Command 搞掂。

迷思二:「開源模型質素好差」

真相:Llama 4 70B 喺多項測試已經超越 GPT-4o。2026 年嘅開源模型同商業模型嘅差距已經微乎其微。

迷思三:「得 Developer 先用得」

真相:Open WebUI 呢類工具令非技術用家都可以用。而且 Groq、Together AI 呢啲平台提供嘅 API 服務,用法同 ChatGPT 一樣咁簡單。

真實建議

由月費制轉自建,最好嘅策略係 「混用」

  • 日常對話、簡單查詢用免費開源
  • 重要專案、複雜任務先用商業方案
  • 每月成本由 $200 降至 $30 以內

下一步行動清單

  1. 今日就試:裝 Ollama,下載 Llama 4 8B,即刻有得用
  2. 呢個星期:試下用 Open WebUI,建立你嘅私人 AI 助手
  3. 呢個月:將一個常用嘅月費服務 Cut 咗,轉用開源替代
  4. 三個月內:建立完整嘅自建 AI 工作流

FAQ

問:MacBook 行唔行到開源 LLM? 答:可以。Mac 嘅統一記憶體架構(Unified Memory)其實好適合行 LLM。M2/M3 系列 16GB RAM 以上已經可以流暢行 8B 模型。

問:最易上手嘅圖像生成方案係咩? 答:用 Fooocus(基於 Stable Diffusion 但唔使 Set 任何參數),裝好之後好似 Midjourney 咁打 Prompt 就得。

問:開源模型有冇版權問題? 答:Llama 4、Mistral、Qwen 都容許商用。唯一要留意係 Flux 模型用咗「非商業條款」嘅訓練數據,商用前最好 Check 清楚。

問:用開源模型係咪一定慳錢? 答:計電費同硬件折舊其實唔一定。但如果用雲端 API,成本一定比商業方案低。


2026 年係開源 AI 嘅轉捩點。無論你決定 Stay 喺商業方案定係試下自建,最緊要係知道自己有選擇。我自己就由完全依賴商業方案,到而家大約 70% 嘅 AI 用量都行開源模型。每個月慳返嘅錢,夠請自己食幾餐好嘢。