5 月 14 日消息，據(jù) tom'sHardware 報(bào)道，在 I / O 會(huì)議上，谷歌發(fā)布了 Google Cloud 最新機(jī)器學(xué)習(xí)集群的預(yù)覽版，該集群不僅旨在實(shí)現(xiàn) 9 exaflops 的峰值性能，而且使用 90% 的無碳能源來實(shí)現(xiàn)。它將成為世界上最大的公開機(jī)器學(xué)習(xí)中心。

新集群的核心是 TPU V4 Pod。這些張量處理單元是去年在 Google I / O 上宣布的，來自 Meta、LG 和 Salesforce 等公司的 AI 團(tuán)隊(duì)已經(jīng)可以使用這些 pod。V4 TPU 允許研究人員使用他們選擇的框架，無論是 Tensorflow、JAX 還是 PyTorch，并且已經(jīng)使 Google Research 在語言理解、計(jì)算機(jī)視覺和語音識(shí)別等領(lǐng)域取得了突破。

基于谷歌俄克拉荷馬州的數(shù)據(jù)中心，集群的潛在工作負(fù)載預(yù)計(jì)將相似，通過自然語言處理、計(jì)算機(jī)視覺算法和推薦系統(tǒng)領(lǐng)域的數(shù)據(jù)進(jìn)行咀嚼。

對(duì)集群的訪問以切片的形式提供，從四個(gè)芯片(一個(gè) TPU VM)一直到數(shù)千個(gè)。具有至少 64 個(gè)芯片的切片利用三維環(huán)形鏈路，為集體通信操作提供更高的帶寬。V4 芯片還能夠訪問兩倍于上一代的內(nèi)存 —— 從 16 增加到 32GiB—— 并且在訓(xùn)練大型模型時(shí)將加速速度提高一倍。 

谷歌研究和人工智能。高級(jí)副總裁 Jeff Dean 表示：“為了讓先進(jìn)的 AI 硬件更易于使用，幾年前我們啟動(dòng)了 TPU 研究云 (TRC) 計(jì)劃，該計(jì)劃為全球數(shù)千名 ML 愛好者免費(fèi)提供了 TPU 訪問權(quán)限，他們發(fā)表了數(shù)百篇論文和開源 github 庫(kù)，主題從《用人工智能寫波斯詩(shī)歌》到《使用計(jì)算機(jī)視覺和行為遺傳學(xué)區(qū)分睡眠和運(yùn)動(dòng)引起的疲勞》。Cloud TPU v4 的發(fā)布對(duì)于 Google Research 和我們的 TRC 計(jì)劃來說都是一個(gè)重要的里程碑，我們很高興能與世界各地的機(jī)器學(xué)習(xí)開發(fā)人員長(zhǎng)期合作，共同使用 AI。”

谷歌的可持續(xù)發(fā)展承諾意味著該公司自 2017 年以來一直在將其數(shù)據(jù)中心的能源使用與古老的能源采購(gòu)相匹配，并計(jì)劃到 2030 年將其整個(gè)業(yè)務(wù)都用于可再生能源。V4 TPU 也比前幾代更節(jié)能，每瓦產(chǎn)生的 FLOPS 是 V3 芯片的三倍。

對(duì) Cloud TPU v4 Pod 的訪問包括評(píng)估(按需)、搶占式和承諾使用折扣 (CUD) 選項(xiàng)，并提供給所有 Google AI Cloud 用戶。

關(guān)鍵詞：