本地AI私隱更安心 ChatGPT唔使再靠佢!

Ai




點解我放棄ChatGPT,轉用本地AI?

我嘅本地AI系統可以處理寫作、編程同私隱文件,完全唔使將資料傳上網絡。

作者:Dhruv Bhutani

我係最早一批試用ChatGPT嘅用家之一。擁有一個隨時隨地幫你做研究嘅全能助手,確實好吸引。當時我對使用AI嘅後果冇乜諗過。但而家情況完全唔同:無可否認,你嘅大量私人資料,例如日記、敏感工作電郵,都會被輸入一個由市值數萬億美元企業擁有嘅「黑盒子」處理。咁樣會有咩風險呢?

AI係未來,無得退返轉頭,但佢嘅用處係可以成為生產力倍增器。正因如此,我開始深入研究本地AI。呢個概念其實好簡單:你可以完全喺自己嘅電腦甚至手機上運行大型語言模型——就係ChatGPT背後嘅大腦。當然,佢冇ChatGPT咁強大或者無所不知,但根據使用情況,已經足夠應付多數任務。而且最重要係,資料完全留喺你嘅裝置,唔使擔心資料外洩,更加無需每月訂閱費。2025年,運行本地大型語言模型變得異常簡單,好似LM Studio同Ollama呢啲工具,只需安裝個App就得。經過幾個月嘅使用,我可以肯定,我唔會再純粹依賴雲端AI。以下係我嘅原因。

你有冇諗過喺自己電腦上運行本地AI?

– 27%人已經用緊
– 40%人有諗過
– 27%人唔知原來可以
– 7%人覺得ChatGPT或Gemini已經夠用

私隱保障

我哋好多時都會不經意喺ChatGPT貼上唔應該分享嘅資料,例如工作中嘅代碼片段、合約副本、禁運資訊,甚至係好私人嘅日記。每次你喺雲端AI發送資料,佢哋就會喺一個完全不透明嘅服務器上處理,並且可能用你嘅資料去訓練AI。

我自己除咗做記者,仲有一份生意,經常接觸需要保密嘅NDA資料。除咗私隱風險,將呢啲資料交俾公眾AI工具甚至係犯法。但本地大型語言模型完全改變咗呢個局面。我試過好多工具,最近用緊AnythingLLM,一個非常簡單嘅桌面工具,可以喺自己電腦上同文件互動。用佢,我可以將稅務報表、發票、銀行結單甚至NDA文件餵入,然後問佢整合開支摘要或者標記重要條款。因為一切運算都喺我嘅電腦上完成,我知道資料唔會被傳送到海外服務器,亦令我可以更快獲得AI分析結果。簡單嚟講,呢個就好似係喺自己電腦運行企業版ChatGPT或者Copilot,但幾乎冇乜成本。

文法檢查

我係寫作為生嘅人,文法檢查係工作必需,但市面上嘅工具例如Grammarly本質上係keylogger,會讀取你嘅所有文字。呢種做法對於寫一封短郵件可能冇問題,但處理敏感資料時我就唔放心。此外,呢啲工具多數都要訂閱,成本高昂,弊多於利。

我嘅解決方案係用本地離線大型語言模型做高效嘅拼寫同文法檢查。例如用LM Studio運行Llama 3或者Mistral呢啲模型,然後輸入詳細指令,要求佢修正文法拼字但唔改寫文章風格。整篇文章一放入本地模型,即時獲得反饋同修正。仲可以根據特定寫作風格訓練,例如係咪用牛津逗號。最重要係資料完全唔會洩漏。

編程支援

雖然大家都批評AI生成嘅代碼係「意粉式混亂」,但佢確實對生成基礎代碼有幫助。我自己大學畢業十五年,已經有啲生疏,但偶爾週末會寫啲代碼。AI幫我理解開源代碼片段非常有用。其實唔使Copilot或者Claude咁複雜,我只要將代碼片段放入Ollama,就可以問AI解釋邏輯。寫代碼時,我會用VS Code嘅插件,將Ollama直接整合入編輯器。

只要下載例如DeepSeek Coder嘅本地模型,佢就會喺IDE內提供代碼補全、重構建議,甚至幫你找錯誤,完全唔使聯網。對開發者嚟講,呢個意味住可以喺處理私有項目或者客戶代碼時,完全唔使擔心知識產權洩漏。用專門嘅開發者模型,體驗甚至可能比通用模型更好。

無審查嘅創作自由

公開AI模型通常有設置嚴格嘅限制,阻止極端或者具爭議性嘅內容。呢點對於好奇心強或者想做深入研究嘅人嚟講係限制。例如我周末興趣係寫驚慄短篇小說,想要做恐怖題材研究,ChatGPT就唔太夠用。

但用本地模型,可以下載無限制版本,唔會道德說教,令你可以自由發揮創意,打造任何性格嘅角色。呢種自由亦適合玩桌遊嘅朋友,想設計血腥嘅DnD劇本都冇問題。

本地AI喺ChatGPT做唔到嘅地方發揮作用

我經常旅行,鍾意離線使用大部分常用服務。依賴雲端AI嘅話,一上飛機或者去偏遠地方就會遇到網絡問題。即使飛機上有WiFi,延遲同斷線都係常態,體驗差。

但我嘅本地AI隨身帶住,喺筆電上裝咗Ollama,隨時可以開用。聽落可能有啲Geek,但實際大大提升生產力,我喺飛機上3.6萬呎高空都可以用到類似ChatGPT嘅功能。如果想更輕量,可以用SmolChat喺Android手機上運行細啲嘅語言模型,應付簡單任務。靈活性極高。

訂閱疲勞

而家好多服務由睇片到睇新聞都要訂閱,AI體驗當然亦係咁。建造同運行AI模型係好貴,但冇一個GPT模型可以樣樣精通。如果我要用好多不同模型,每個月嘅費用好快就嚟到好貴。

本地AI就係買斷式選擇,唯一成本係硬件。PC用家要有好嘅顯示卡,蘋果用家MacBook Air都可以跑中等大小模型。開源模型係免費嘅,如果你嘅電腦唔舊,基本上已經有足夠硬件玩本地AI。而且OpenAI一年先更新一次ChatGPT,但你可以喺Hugging Face幾乎每星期試新模型同變種。

速度與延遲

雖然你嘅電腦唔會比得過ChatGPT背後嘅大型數據中心,但視乎用法,其實差距唔係太大。喺本地跑,文字生成同摘要通常同商業工具差唔多快,有時甚至更快。最重要係無需面對網絡延遲或者伺服器擠塞嘅問題。用ChatGPT時你一定試過轉圈圈,甚至連線超時,但本地模型完全冇呢啲煩惱。

本地AI適合所有人嗎?

講真,本地AI唔係完美,亦唔適合所有人。如果你用Claude解決複雜數學問題,或者想用最先進嘅推理能力,雲端大型模型如ChatGPT 5.1或者Claude係最佳選擇。佢哋嘅參數規模遠超你電腦可以跑嘅模型。但日常90%嘅AI任務,例如摘要、編輯、代碼解釋、腦力激盪,本地模型已經夠用。

呢個活動有啲Geek味,但好玩又有趣,好似互聯網早期嘅「狂野西部」,但係你完全掌控自己嘅數據同工具。

編輯評論:

作者的體驗揭示咗本地AI帶嚟嘅一個重要轉變:從依賴巨型雲端服務轉向自我掌控嘅私隱安全與靈活性。香港用戶尤其應該關注呢點,因為本地AI能夠避免資料跨境傳輸同埋可能嘅監控風險,對於處理敏感工作文件或者私人資料非常重要。

同時,訂閱疲勞係現代數碼生活嘅一大問題,唔少人都被月費綁死。本地AI嘅「買斷式」模式,配合開源免費模型,提供咗一條可持續發展嘅替代路線。雖然硬件投入唔算平,但隨著硬件價格下降,未來普及度會愈來愈高。

不過,本地AI仍有局限:模型能力、更新頻率同算力限制,令佢未必適合追求最尖端AI體驗嘅用家。對於香港嘅中小企或者個人創作者嚟講,本地AI提供咗一個兼顧效率同私隱嘅實用方案,尤其適合需要處理大量敏感資料嘅行業。

最後,作者提及嘅「無審查創作自由」亦值得深思。雖然公共AI有必要設置倫理規範,但過度限制亦可能扼殺創意。香港創意產業可以利用本地AI探索更大嘅創作空間,帶動文化多元發展。

總括而言,本地AI未必係每個人嘅必需品,但佢代表咗AI使用方式嘅一大進步。香港用戶若能善用本地AI,將能更好掌控個人數據安全,兼享AI技術帶嚟嘅便利與創造力。

以上文章由特價GPT API KEY所翻譯及撰寫。而圖片則由FLUX根據內容自動生成。

🎬 YouTube Premium 家庭 Plan成員一位 只需 HK$148/年

不用提供密碼、不用VPN、無需轉區
直接升級你的香港帳號 ➜ 即享 YouTube + YouTube Music 無廣告播放

立即升級 🔗