Google搶攻邊緣GAI的兩大關鍵策略
· 2024-05-03

Google邊緣AI的戰略,不只推出在Android裝置上跑的輕量版本Gemini模型,還推出一個相同技術的開源版,要將其影響力從雲端向下延伸到邊緣

Google初期在Android行動裝置中提供3類Gemini應用,包括錄音摘要、Gboard鍵盤智慧回覆和聊天傳訊改寫。舉例來說,Pixel 8 Pro手機使用者可以在轉錄工具App中使用Gemini Nano模型提供會議音檔的重點摘要。此外,Gemini也能夠根據鍵盤上的上下文輸入提供文字的建議,而且聊天訊息對話過程中,也能根據原始內容提供改寫的建議。(攝影/余至浩)

Gemini要利用相同技術的GAI開源模型Gemma進軍邊緣AI

Google在邊緣AI策略,除了推出可在裝置上跑的Gemini Nano模型,還將另一款採用相同技術研發的邊緣GAI模型Gemma開源,要借助開源社群的力量將Gemini影響力向外擴散到更多應用領域之中,這是Google在邊緣AI另一大重要策略。

Gemma是Google在今年2月釋出的一款輕量級邊緣GAI開源模型,用來挑戰臉書Meta的LlaMa。Gemma正式採用Apache-2.0授權釋出,因此其更易於散播,並且可以在桌機、筆電,甚至行動裝置、IoT裝置上執行。

Gemma採用與Gemini模型系列相同的架構、訓練資料和訓練方法,利用了6兆個Tokens的資料集(包含網路文檔、數學和程式碼)進行訓練,而且同樣基於安全與負責任的AI原則設計。不過,與Gemini不同的是,Gemma並非多模態模型,僅能支援單一資料型態,目前僅支援英語輸入。

Gemma發布後,Google隨後將Gemma和其商用GAI模型Gemini API並列在Google AI for developer頁面的GAI工具列表中,提供給開發人員使用,表明對其未來發展的重視。

在會前一場亞太媒體活動上,Thomas Kurian透露對於這款邊緣GAI模型未來發展的企圖,他強調:「Gemma建立在與Gemini相同的基礎技術和能力上,目的是吸引開發者生態系統的加入,並透過Gemma向開發者社群提供Gemini中可用功能。」

不只能夠透過社群回饋持續提高和改進Gemma模型的能力,Google同時也能將這些改進應用在正式的商用Gemini產品中,使模型表現越來越好,甚至借助開源社群的力量將Gemini影響力向外擴散到更多應用領域。

借助開源力量將Gemini影響力向外擴散到更多應用領域

開發人員現在已經可以在Android裝置中安裝和執行Gemma, 透過MediaPipe 釋出的實驗性LLM推論API,可以支援包括Gemma 2B模型在內的推論任務。Gemma現階段提供了70 億和20 億參數兩種版本,前者用在GPU和TPU上的應用部署和開發,後者則是專用在CPU為主的裝置應用上。

不過在GPU的裝置上執行20億和70億的Gemma模型,分別需要至少8GB以上和24GB以上的記憶體。

Google雖然不是唯一一家將自家GAI模型開源的公雲業者,例如微軟最近釋出了SLM模型Phi-3-min,同樣可以在行動裝置上執行。但是Google在Next大會上進一步在雲端LLM開發平臺Vertex中開始提供Gemma系列模型,包括程式碼生成模型CodeGemma等,讓企業可以在自家LLM應用中開始採用。

此外,Google在其GDC分散式雲端服務中開始提供Gemma模型的支援,進一步將Gemma應用到了靠近資料所在的企業邊緣環境,例如工廠等。

熱門文章
菲律賓網絡賭博和加密貨幣仍構成持續的洗錢風險
東南亞資訊
印度最高法院受理公益訴訟,要求全國禁封「偽裝」成社交遊戲的賭博平台
合規與政策
橫跨全球6個城市,灰度8場派對邀你共看世界盃,重塑高質量社交新場景
灰度頭條
灰度在iGB L!VE 2026展位T70和你相約7月,一起點燃倫敦的熱情!
灰度頭條
新澤西州7月博彩收入創6.06億美元新高,頒布禁令
合規與政策
GGC Awards 2026 璀璨科倫坡:致敬 iGaming 行業的領航者與創新力量
灰度頭條
巴西擬將博弈稅率提高至24% 稅收將用於社保與醫療領域
合規與政策
越南在線博彩業政策收緊 催生市場新機遇
東南亞資訊
西班牙監管機構警告在線賭博平臺存在身份盜竊行為
合規與政策
斯里蘭卡博弈產業大轉型,官方:劍指南亞拉斯維加斯
合規與政策
越南博彩管控逐步放寬,惟本土需求仍顯乏力
東南亞資訊
菲律賓博彩技術賽道迎來新變局,B2B 供應模式加速滲透
東南亞資訊
哈薩克計劃對線上賭場促銷活動進行處罰
合規與政策
印第安納州在線賭場法案在眾議院委員會停滯不前
合規與政策
英國確認各垂直行業的賭博稅稅率
合規與政策
首頁
遊戲
合作
發現
我的