Google 的全新開源模型「Gemma 4」不僅具備出色的推理能力,其中的 E2B 模型更輕量到僅需 700 行 C 語言程式碼即可驅動,可在智慧型手機等多種裝置上靈活運用。
想像一下。早上起床對著智慧型手機說:「幫我整理今天的會議行程,並按重要性排序。」過去,這個請求必須跨越網際網路發送到 Google 龐大的資料中心,經過複雜運算後再回傳;而現在,所有的處理過程都能在您的智慧型手機內瞬間完成。這就是 Google 雄心勃勃推出的最新人工智慧模型——「Gemma 4」。
為何這很重要?
過去我們所使用的強大 AI,絕大多數都需要連網。這是因為 AI 模型的腦袋,也就是「參數(Parameter,模型內部可調整的數值)」過於巨大,個人裝置根本無法承載。然而,Gemma 4 正在改變這個規則。
Gemma 4 在「參數對比智慧」方面展現出驚人的水準,並針對複雜推理與 AI 代理人(代替使用者執行指令的 AI)任務進行了最佳化 出處:Gemma 4:我們最有能力的開源模型們 出處:Gemma 4 - Google DeepMind。換句話說,這意味著即使在沒有網路連接的情況下,您的手機也能提供高水準的工作輔助。
淺顯易懂:超微型指南書的魔法
Gemma 4 能夠在智慧型手機上運作的祕訣是什麼?核心就在於「效率」。Gemma 4 系列中體積最小的模型「E2B」,設計上僅需 700 行 C 語言程式碼即可運行 出處:Gemma 4 E2B 推理 700 行程式碼。
簡單比喻如下:既有的巨型 AI 模型就像一個必須集結 100 位專家進行討論才能得出結論的團隊,而 Gemma 4 E2B 則像是一位帶著「超微型指南書」的資深專家,書中只濃縮了這些專家的核心竅門。既然指南書如此輕薄,自然能以更少的資源更快判斷情勢並給出答覆。
此外,Google 還加入了名為「多標記預測(Multi-token prediction)」的神奇最佳化技術 出處:Google 的多標記預測。這就像作家在寫作時,坐在旁邊的助手提前預擬了後續的幾句話,作家只需快速確認這些提議是否合適。透過小型模型(輔助模型)提前提議多個標記(AI 處理語言時分割的資料碎片),再由主模型一次性驗證,藉此大幅提升了推理速度 出處:Google 的多標記預測。
目前進度如何?
Gemma 4 不僅僅是一個擅長寫作的模型。這些模型還支援「多模態(Multimodal,同時理解文字、影像、音訊等多種形式資料的能力)」出處:Gemma 4 模型概述 出處:Gemma 4。目前 Gemma 4 已推出 E2B、E4B、12B、31B、26B A4B 等多種規格,以適應不同使用者的裝置效能與需求 出處:Gemma 4 模型概述。
目前已有開發者與使用者透過 Google AI Studio、Vertex AI、Hugging Face、Ollama 等多種平台直接運用;透過 llama.cpp、vLLM 等普及的推理框架,在您個人的電腦或筆記型電腦上也能立即執行 出處:Gemma 4 - Google DeepMind。
未來的變革
Gemma 4 是邁向 AI 生活化的第一步。未來,搭載這類高效率模型的家電、汽車與手機,將不再只是被動等待指令的工具,而是將演化為能理解情境、代替使用者解決問題的真正「代理人」。最重要的是,因為無須將個人資料傳出裝置外就能享有強大的 AI 功能,預計隱私權問題也將獲得進一步的改善。
參考資料
-
[Gemma 4 E2B inference in 700 lines of C Modern Orange](https://modernorange.io/item/49468286) - Welcome Gemma 4: Frontier multimodal intelligence on device
- Gemma 4 — Google DeepMind
- Google says multi-token prediction makes Gemma 4 up to… - YouTube
- Gemma 4: Our most capable open models to date
-
[Gemma 4 model overview Google AI for Developers](https://ai.google.dev/gemma/docs/core) - Gemma 4: Our most capable open models to date
- Gemma 4: Our most capable open models to date
- Gemma 4: Our most capable open models to date
- Gemma 4: Our most capable open models to date
-
[Gemma 4 12B: обзор локальной мультимодальной… AiManual](https://ai-manual.ru/article/gemma-4-12b-pervoe-ruchnoe-testirovanie-lokalnoj-multimodalnoj-modeli-s-zreniem-audio-i-vyizovom-instrumentov/) - Gemma 4
- 僅能處理文字
- 針對高階推理及代理人任務進行了最佳化
- 非常沉重,僅能在超級電腦上運作
- 需要 100 萬行的 Python 程式碼
- 僅需 700 行 C 語言程式碼即可進行推理
- 比現有模型慢 100 倍
- 增加學習時間
- 強化安全性
- 一次驗證由輔助模型提議的多個標記,藉此提升速度