「AI 一定要用雲端?其實你部手機已經做到。」
你有冇試過呢種情況:
- 用 ChatGPT 整理公司機密文件,但擔心資料外洩
- 搭緊地鐵想用 AI 翻譯一段日文,但收唔到網絡
- 覺得每次問 AI 都要等幾秒先有回應,好無效率
如果你有以上煩惱,Edge AI(邊緣人工智能)就係你要嘅答案。
Edge AI 嘅概念好簡單:AI 模型直接喺你嘅裝置(手機、電腦、平版)上面運行,唔需要連上雲端伺服器。
2026 年,呢個技術已經由理論變成現實。Apple Intelligence、Google Gemini Nano、Qualcomm 嘅 NPU——全部喺你部機入面 24/7 待命。唔使連線、唔使比月費、唔使擔心私隱。
我呢篇文會由零開始,講解 Edge AI 係乜、點樣用、同埋點樣喺日常生活同工作中實際應用。
1. Edge AI vs Cloud AI:一張表睇晒分別
| 比較項目 | Edge AI(裝置端) | Cloud AI(雲端) |
|---|---|---|
| 網絡要求 | 完全 offline 可運作 | 必須連線 |
| 延遲 | 即時(毫秒級) | 視乎網絡(1-5 秒) |
| 私隱 | 資料留喺你部機 | 上傳到第三方伺服器 |
| 運算能力 | 受裝置硬件限制 | 幾乎無限(用錢買) |
| 成本 | 硬件一次過 | 月費/按用量收費 |
| 模型大小 | 1B-70B 參數 | 70B-1T+ 參數 |
| 電池消耗 | 中至高(NPU 優化中) | 低(裝置只做傳輸) |
簡單總結:Cloud AI 勝在「大力出奇蹟」,咩都問得;Edge AI 勝在「快、靜、私密」,適合日常貼身應用。
2026 年嘅趨勢係混合 AI——簡單任務由 Edge 即時處理,複雜任務先交雲端。兩者互補,唔係取代。
2. Apple Intelligence:邊緣 AI 嘅大眾化推手
Apple Intelligence 喺 2024 年 WWDC 首次亮相,到 2026 年已經全面融入所有 Apple 裝置。
對香港用家最有用嘅功能:
** 系統級寫作工具**
- Mail、Message、Notes 入面直接改語氣、校對、總結
- 重點:全部 offline 處理,你公司嘅機密電郵唔會離開你部機
- 支援繁體中文 + 廣東話語境理解
** 相片編輯**
- 「清理」功能:一鍵移除背景路人
- 自然語言搜尋:「搵上次阿媽生日食飯張相」
- 全部喺 iPhone / Mac 入面運行
** 個人情境理解**
- Siri 可以存取你嘅 screen context
- 「幫我將呢個地址加入剛收到嘅訊息嘅聯絡人」——理解前文後理
- 資料只會留喺裝置,唔會上傳 Apple
** Mac 嘅 Apple Silicon 優勢**
- M 系列晶片嘅 Neural Engine 由 M1 嘅 11 TOPS 進化到 M4 Ultra 嘅 50+ TOPS
- 可以本地運行 7B 以下模型,速度可與入門 GPU 媲美
實戰貼士:如果你用 iPhone 15 Pro 或更新機型,去 Settings > Apple Intelligence & Siri 確認功能已開啟。2026 年 iOS 已經內置大部分 Edge AI 功能,唔需要額外設定。
3. Google AI 嘅邊緣策略:Gemini Nano 與 AI Core
Google 嘅 Edge AI 策略主打 Android 生態,核心係 Gemini Nano——專為流動裝置設計嘅小型 LLM。
Gemini Nano 嘅演進(2024 → 2026)
| 版本 | 參數量 | 推出年份 | 主要功能 |
|---|---|---|---|
| Nano-1 | 1.8B | 2024 | 基本摘要、智能回覆 |
| Nano-2 | 3.25B | 2025 | 多模態(文字+圖片)、錄音轉錄 |
| Nano-3 | 7B | 2026 | 完整對話、程式生成、離線翻譯 |
Android 用家嘅 Edge AI 功能:
** Call Screen / 來電過濾**
- 直接喺手機辨識詐騙來電
- 自動同陌生人對話,幫你記低對方來意
** Magic Editor / 魔法編輯**
- 一鍵移除相片雜物
- 改變天空顏色、移動物件
- 全部喺 Pixel / Samsung 裝置端處理
** 離線翻譯**
- 支援 59 種語言嘅離線翻譯
- Google 翻譯 App 入面下載語言包後完全 offline
- 2026 年質素已接近雲端版本
** Recorder App 錄音轉錄**
- 實時將語音轉文字
- 支援廣東話辨識
- 全部喺裝置完成,唔使連線
實戰貼士:如果你用 Samsung Galaxy S 系列或 Google Pixel,去 Settings > Advanced Intelligence > AI Core 可以見到 Edge AI 嘅詳細狀態同用量。
4. 自己動手:用 Ollama 喺你部電腦跑 AI
如果你想進一步控制 Edge AI,Ollama 係目前最易用嘅工具。
Ollama 係乜?
Ollama 係一個開源工具,等你喺自己嘅電腦(Mac / Windows / Linux)直接下載同運行 LLM。支援數百個開源模型,全部 local 執行。
點解要用 Ollama?
- 私隱:處理合約、財務報表、個人文件——資料唔會離開你部機
- 免費:冇月費、冇按用量收費
- 離線:冇網絡都用到
- 可控:你可以揀用邊個模型、用咩參數
3 分鐘快速開始
# 第一步:下載 Ollama(官網有 macOS / Windows / Linux 版本)
# macOS: https://ollama.com/download
# Windows: https://ollama.com/download/windows
# 第二步:安裝後 terminal 執行
ollama pull llama3.2:3b # 下載 Meta 嘅 Llama 3.2 3B 模型(適合 8GB RAM 裝置)
ollama run llama3.2:3b # 直接開 chat
# 第三步:試吓問問題
>>> 用廣東話解釋乜嘢係邊緣運算
2026 年推薦 Edge AI 模型
| 模型 | 參數量 | RAM 需求 | 最佳用途 |
|---|---|---|---|
| Llama 3.2 | 1B / 3B | 4-8 GB | 日常對話、摘要 |
| Phi-4 | 4B / 14B | 8-16 GB | 推理、數學、程式 |
| Mistral Nemo | 12B | 16 GB | 多語言、商業文件 |
| Qwen 2.5 | 7B | 8 GB | 繁體中文表現佳 |
| Gemma 2 | 2B / 9B | 4-12 GB | Google 生態、Android 開發 |
香港用家提示:處理中英文混合文件(例如公司合約),Qwen 2.5 7B 同 Phi-4 嘅繁體中文能力最可靠。
進階應用:local RAG(本地文件問答)
你可以用 Ollama + 其他工具,將自己嘅文件變成「私人 knowledge base」:
- 匯入 PDF、Word、Excel 文件
- AI 自動為文件建立索引
- 用自然語言查詢文件內容
- 所有資料留喺你部機
工具推薦:
- AnythingLLM:最易用嘅 local RAG 界面(有 Desktop App)
- Open WebUI:類似 ChatGPT 界面,但行 local 模型
- LangChain + ChromaDB:開發者用,彈性最大
5. 香港用家實戰場景 5 選
場景 1:處理機密商業文件
「我想用 AI 幫手分析份合約,但絕對唔可以上傳去 ChatGPT。」
- 方案:Ollama + Llama 3.2 或 Qwen 2.5
- 做法:將合約貼入 local LLM,問「呢份合約有冇唔合理條款?」
- 好處:文件唔會離開你部機,符合私隱要求
場景 2:離線翻譯日文菜單 / 路牌
「去日本旅行,但又唔想買漫遊數據。」
- 方案:Google Translate App(離線語言包)
- 做法:出發前 Download 日文→繁體中文語言包
- 好處:相機翻譯 + 語音翻譯全部 offline
場景 3:Interview 錄音即時轉文字
「見咗份工想重溫 interview 內容,但唔想逐段聽。」
- 方案:iPhone Recorder App / Android Recorder App
- 做法:錄音後直接用 Edge AI 轉文字 + 自動摘要
- 好處:唔使上傳錄音去任何雲端服務
場景 4:用本地 AI 幫手寫 code
「想用 AI 幫手寫 Python script,但公司政策唔准用 ChatGPT。」
- 方案:Continue.dev(VS Code Extension)+ Ollama
- 做法:VS Code 入面直接同 local LLM 對話,自動補 code
- 好處:公司嘅 source code 唔會流出
場景 5:個人知識管理
「我有成百份 PDF 文章,想隨時問佢哋入面嘅內容。」
- 方案:AnythingLLM + Ollama
- 做法:將 PDF 匯入 AnythingLLM,建立 local knowledge base
- 好處:所有資料整理同搜尋都喺 local 完成
6. Edge AI 嘅未來趨勢(2026-2027)
手機 NPU 繼續進化
Qualcomm Snapdragon 9 Gen 4、Apple M4/A18 Pro、MediaTek Dimensity 嘅 NPU 效能每年翻倍。預計 2027 年手機可以順暢運行 13B 模型。
企業 Edge AI 爆發
愈來愈多企業將 AI 由雲端搬到內部 server 或 edge device,原因:資料主權、合規要求、成本控制。
專用 Edge AI 硬件
- AI PC:Microsoft Copilot+ PC 要求 NPU > 40 TOPS
- AI Phone:Android 16 原生支援 local AI agent
- AIoT:智能家居、閉路電視逐步本地化 AI 處理
私隱法規推動
歐盟 AI Act、香港個人資料私隱條例修訂,令更多公司選擇 Edge AI 處理個人資料。
Hybrid AI 成為標準
裝置做即時推理(<100ms),雲端做複雜訓練——兩者無縫切換。
7. 常見問題 FAQ
Q1:Edge AI 會取代 ChatGPT 呢啲雲端 AI 嗎?
唔會。Edge AI 同 Cloud AI 各有定位。簡單、私密、需要即時回應嘅任務畀 Edge;複雜推理、創作、需要大量知識嘅任務仍然要靠雲端。未來係兩者並存。
Q2:我部舊手機用唔用到 Edge AI?
視乎機型。2023 年後嘅中高階手機(iPhone 15 Pro 以上、Samsung S24 以上、Pixel 8 以上)已經有專用 NPU,可以流暢運行 Edge AI 功能。舊機可能只得部分功能(例如離線翻譯)。
Q3:Ollama 會唔會令部電腦變慢?
視乎模型大小同你部電腦嘅規格。3B 或以下模型喺 8GB RAM 嘅電腦可以順暢使用。7B+ 模型建議 16GB RAM 以上。Ollama 只喺你 call 佢嘅時候先用資源。
Q4:Edge AI 嘅私隱係咪真係安全?
係。因為AI 推理嘅過程完全喺你部機入面進行,資料唔會經網絡傳輸。唯一要注意係你下載嘅模型本身——建議用官方來源(Ollama Library / Hugging Face)。
Q5:香港有冇 Edge AI 嘅本地社群?
有。香港都有唔少人在 Discord、Telegram 群組討論 Edge AI 同 local LLM。你可以留意 Hugging Face Hong Kong 嘅 meetup,或者上 Reddit r/LocalLLaMA 睇國際討論。
一句總結
Edge AI 唔係「弱化版」嘅雲端 AI,而係另一種思考方式:將 AI 能力由中央伺服器還原返俾你——你嘅手機、你嘅電腦、你嘅數據、你嘅控制。
2026 年,唔使再等雲端回應,你已經可以隨身帶住一個私人 AI。
如果你對 Edge AI 有任何問題,或者想知某個特定場景點樣用 local AI 解決,歡迎留言問我。我會繼續 update 呢篇文,跟進最新嘅 Edge AI 發展。