Meta釋出擁有700億參數的Code Llama,為目前最佳開源程式碼生成模型
· 2024-01-31

Meta發布Code Llama 70B模型,成為目前效能最佳的開源程式碼生成模型,HumanEval Pass@1測試分數達67.8%

根據Meta所更新的HumanEval Pass@1指標分數,Code Llama-70B-Instruct分數為67.8%,不只遠超過之前Code Llama-34B-Instruct的41.5%,也是目前開源模型中的最佳表現,甚至超過當初GPT-4的67.0%。

HumanEval Pass@1是專門用於評估程式碼生成模型的效能,而Pass@1是指在模型不進行任何重試的情況下,第一次嘗試就成功解決問題的機率。在對程式碼生成模型進行測試時,研究人員會提供一系列程式開發問題給模型,針對每個問題,模型只有一次機會生成解決方案,而模型所生成的解決方案,會經過一連串單元測試確認其正確性。因此Pass@1是一個重要指標,代表模型沒有多次嘗試或是人工干預的情況下解決問題的能力。

針對Code Llama 70B模型的發布,Mark Zuckerberg也特地發文並提到,撰寫和編輯程式碼已經成為人工智慧模型重要的用途之一,而且編寫程式碼的能力,也對於人工智慧模型能更嚴謹且更有邏輯地處理其他領域資訊有著重要的影響。

热门文章
英国确认各垂直行业的赌博税税率
游戏风向
密西西比州众议院委员会推进提议增加赌场税的法案
游戏风向
巴西颁布新法赋权央行封锁非法博彩账户及 Pix 交易
支付动态
越南在线博彩业政策收紧 催生市场新机遇
东南亚资讯
准备好了将你的收益最大化吗?尝试ProPush.me Constructor!
广告营销
斯里兰卡博弈产业大转型,官方:剑指南亚拉斯维加斯
游戏风向
超级PAC筹资4800万美元:体育博彩势力加码
游戏风向
亚洲顶尖游戏供应商多寶游戏 DB GAMING,开创亚洲市场的唯一首选
广告营销
JILI 宣布与全球板球传奇 AB de Villiers(ABD)达成重磅战略合作
体育游戏
张侨伟参议员排除全面禁止,敦促菲律宾规范网络赌博
东南亚资讯
哈萨克斯坦计划对在线赌场促销活动进行处罚
游戏风向
印度最高法院受理公益诉讼,要求全国禁封“伪装”成社交游戏的赌博平台
游戏风向
PropellerAds 分享了新的 iGaming 案例研究:在 3 个月实现 97,674 次安装和 12,701 笔存款
广告营销
新泽西州7月博彩收入创6.06亿美元新高,颁布禁令
游戏风向
越南博彩管控逐步放宽,惟本土需求仍显乏力
东南亚资讯
首页
游戏
合作
发现
我的