GKE用戶現在也可以選用Cloud TPU訓練AI模型
· 2023-09-04

Google的Kubernetes服務GKE現支援Cloud TPU,配合多項工具與自動化功能,以及TPU的高效擴展能力,可助用戶處理大規模人工智慧工作負載

Google宣布在其Kubernetes服務GKE中加入Cloud TPU支援,也就是說現在用戶可以在GKE中,使用TPU處理大規模人工智慧負載,可選用的型號包括Cloud TPU v4或是最新的Cloud TPU v5e。GKE也提供了許多實用工具,供用戶更好地運用TPU執行機器學習模型,以及進行日誌記錄、監控與自動配置等任務。

Cloud TPU是Google設計專門用於機器學習工作負載的硬體加速器,其特別設計的晶片,可以加速模型運算,像是大型語言模型、Vision Transformer模型或是其他擴散生成模型。用戶過去要使用Cloud TPU大規模處理人工智慧工作負載,需要自己手動操作繁瑣的程序。

透過在GKE提供Cloud TPU支援,用戶不只可以使用GPU加速模型運算,現在還可以選用TPU,並且在GKE一致的操作環境中,執行各種類型的工作負載,並且獲得自動擴展、自動配置、自動修復和自動升級等一系列自動化功能,降低營運負擔。

Cloud TPU節點池可以自動配置並擴展,簡化用戶調度工作,Cloud TPU上的水平擴展能力極高,透過新的Multislice技術,用戶可以在單次訓練中使用數萬個晶片,更快速且大規模地訓練模型。

官方特別強調,Cloud TPU高效擴展的能力,能夠在增加資源的同時,獲得幾乎等比例的加速,有效率地執行工作負載。另外,Google還推出JobSet API來抽象Multislice的操作,能夠對跨數千個TPU晶片的工作負載,提供故障處理機制。

GKE用戶也可以透過Kueue等API在團隊中共享TPU資源,Google解釋,雖然用戶的工作負載仍透過Kubernetes調度,但是在Kueue中,用戶可以建立不同優先等級的工作負載,並且將空閒資源先分配給高優先等級的任務。此外,用戶只要啟用GKE系統指標,便可以在Cloud Monitoring查看Cloud TPU基礎設施指標,在Google雲端控制臺的GKE區塊,監控TPU資源使用。


热门文章
斯里兰卡博弈产业大转型,官方:剑指南亚拉斯维加斯
游戏风向
PropellerAds 分享了新的 iGaming 案例研究:在 3 个月实现 97,674 次安装和 12,701 笔存款
广告营销
张侨伟参议员排除全面禁止,敦促菲律宾规范网络赌博
东南亚资讯
横跨全球6个城市,灰度8场派对邀你共看世界杯,重塑高质量社交新场景
灰度头条
巴西颁布新法赋权央行封锁非法博彩账户及 Pix 交易
支付动态
GGC Awards 2026 璀璨科伦坡:致敬 iGaming 行业的领航者与创新力量
灰度头条
新泽西州7月博彩收入创6.06亿美元新高,颁布禁令
游戏风向
越南在线博彩业政策收紧 催生市场新机遇
东南亚资讯
菲律宾博彩技术赛道迎来新变局,B2B 供应模式加速渗透
东南亚资讯
哈萨克斯坦计划对在线赌场促销活动进行处罚
游戏风向
JILI 宣布与全球板球传奇 AB de Villiers(ABD)达成重磅战略合作
体育游戏
密西西比州众议院委员会推进提议增加赌场税的法案
游戏风向
英国确认各垂直行业的赌博税税率
游戏风向
灰度在iGB L!VE 2026展位T70和你相约7月,一起点燃伦敦的热情!
灰度头条
越南博彩管控逐步放宽,惟本土需求仍显乏力
东南亚资讯
首页
游戏
合作
发现
我的