Mistral公佈邊緣運算AI模型Les Ministraux
支付動態 · 2024-10-17

Mistral AI公佈Ministral 3B與Ministral 8B模型,適用於裝置上翻譯、本地端分析或自主機器人等邊緣應用場景

Mistral AI提供的效能數據顯示,在MMLU、AGIEval等基準測試中,Ministral 3B與8B模型表現,分別優於Llama 3.2 3B、Gemma 2 2B與Llama 3.1 8B。(/Mistral AI)

法國AI新創業者Mistral AI本週公佈Les Ministraux,讓開發商及使用者可在筆電或智慧型手機等邊緣裝置上執行AI任務。

兩款新模型各名為Ministral 3B與Ministral 8B,合稱Les Ministraux,是為裝置和邊緣應用場景開發的state-of-art模型。兩者支援128K脈絡長度(在vLLM框架上目前為32K),其中Ministral 8B還具有交錯滑動視窗(interleaved sliding-window)注意力模式,可支援更快、更省記憶體的推論作業。

該公司強調,二款新模型已在參數100億以下類別模型中,將知識、常識、函式呼叫及效率能力提升到新境界,可用於多種個人或企業應用,像是裝置上翻譯、頻寬不佳地區的智慧助理、本地端分析或自主機器人。而若結合較大語言模型如Mistral Large,les Ministraux也能扮演多階段代理式工作流程的函式呼叫中介者角色,經微調後能根據使用者需求,在多種情境中處理輸入解析(input parsing)、任務路由或呼叫API,提供低成本及低延遲性的效益。

這家新創業者也比較了和市場上參數量相仿的知名模型的比較,顯示在知識與常識、程式撰寫、數學解題、以及多語能力,Ministral 3B超越Meta Llama 3.2 3B及Google Gemma 2 2B,Ministral 8B則大部份超過Meta Llama 3.1 8B以及自家的Mistral 7B,只在程式撰寫任務上小輸Llama 3.1 8B。

Mistral AI已透過Hugging Face公開Ministral-8B-Instruct-2410供研究用途,支援中文等10種語言。使用者必須輸入基本聯絡資訊換取授權。二款模型不久後將提供給雲端合作夥伴。

由Mistral AI的la Platforme平臺存取模型的費用方面,Ministral 8B為輸入/輸出每百萬token 0.1美元,Ministral 3B為輸入/輸出每百萬token 0.04美元。Ministral 8B提供商用及研究授權,較小的Ministral 3B只提供商用授權。若企業開發商想自行部署可聯絡Mistral AI,業者會協助為特定應用場景無損縮減模型。

熱門文章
GGC Awards 2026 璀璨科倫坡:致敬 iGaming 行業的領航者與創新力量
灰度頭條
超級PAC籌資4800萬美元:體育博彩勢力加碼
合規與政策
越南博彩管控逐步放寬,惟本土需求仍顯乏力
東南亞資訊
灰度在iGB L!VE 2026展位T70和你相約7月,一起點燃倫敦的熱情!
灰度頭條
橫跨全球6個城市,灰度8場派對邀你共看世界盃,重塑高質量社交新場景
灰度頭條
菲律賓網絡賭博和加密貨幣仍構成持續的洗錢風險
東南亞資訊
越南在線博彩業政策收緊 催生市場新機遇
東南亞資訊
斯里蘭卡博弈產業大轉型,官方:劍指南亞拉斯維加斯
合規與政策
JILI 宣佈與全球板球傳奇 AB de Villiers(ABD)達成重磅戰略合作
體育遊戲
菲律賓博彩技術賽道迎來新變局,B2B 供應模式加速滲透
東南亞資訊
新澤西州7月博彩收入創6.06億美元新高,頒布禁令
合規與政策
西班牙監管機構警告在線賭博平臺存在身份盜竊行為
合規與政策
巴西擬將博弈稅率提高至24% 稅收將用於社保與醫療領域
合規與政策
哈薩克計劃對線上賭場促銷活動進行處罰
合規與政策
印第安納州在線賭場法案在眾議院委員會停滯不前
合規與政策
首頁
遊戲
合作
發現
我的