發(fā)布時間：2022-05-15 10:17:46  訪問次數(shù)：464

發(fā)布人：優(yōu)洱士電腦維修

谷歌正式發(fā)布 TPU V4 芯片

5 月 15 日消息，據(jù) tom'sHardware 報道，在 I / O 會議上，谷歌發(fā)布了 Google Cloud 最新機(jī)器學(xué)習(xí)集群的預(yù)覽版，該集群不僅旨在實(shí)現(xiàn) 9 exaflops 的峰值性能，而且使用 90% 的無碳能源來實(shí)現(xiàn)。它將成為世界上最大的公開機(jī)器學(xué)習(xí)中心。

新集群的核心是 TPU V4 Pod。這些張量處理單元是去年在 Google I / O 上宣布的，來自 Meta、LG 和 Salesforce 等公司的 AI 團(tuán)隊(duì)已經(jīng)可以使用這些 pod。V4 TPU 允許研究人員使用他們選擇的框架，無論是 Tensorflow、JAX 還是 PyTorch，并且已經(jīng)使 Google Research 在語言理解、計(jì)算機(jī)視覺和語音識別等領(lǐng)域取得了突破。

基于谷歌俄克拉荷馬州的數(shù)據(jù)中心，集群的潛在工作負(fù)載預(yù)計(jì)將相似，通過自然語言處理、計(jì)算機(jī)視覺算法和推薦系統(tǒng)領(lǐng)域的數(shù)據(jù)進(jìn)行咀嚼。

對集群的訪問以切片的形式提供，從四個芯片（一個 TPU VM）一直到數(shù)千個。具有至少 64 個芯片的切片利用三維環(huán)形鏈路，為集體通信操作提供更高的帶寬。V4 芯片還能夠訪問兩倍于上一代的內(nèi)存 —— 從 16 增加到 32GiB—— 并且在訓(xùn)練大型模型時將加速速度提高一倍。

谷歌研究和人工智能。高級副總裁 Jeff Dean 表示：“為了讓先進(jìn)的 AI 硬件更易于使用，幾年前我們啟動了 TPU 研究云 (TRC) 計(jì)劃，該計(jì)劃為全球數(shù)千名 ML 愛好者免費(fèi)提供了 TPU 訪問權(quán)限，他們發(fā)表了數(shù)百篇論文和開源 github 庫，主題從《用人工智能寫波斯詩歌》到《使用計(jì)算機(jī)視覺和行為遺傳學(xué)區(qū)分睡眠和運(yùn)動引起的疲勞》。Cloud TPU v4 的發(fā)布對于 Google Research 和我們的 TRC 計(jì)劃來說都是一個重要的里程碑，我們很高興能與世界各地的機(jī)器學(xué)習(xí)開發(fā)人員長期合作，共同使用 AI。”

谷歌的可持續(xù)發(fā)展承諾意味著該公司自 2017 年以來一直在將其數(shù)據(jù)中心的能源使用與古老的能源采購相匹配，并計(jì)劃到 2030 年將其整個業(yè)務(wù)都用于可再生能源。V4 TPU 也比前幾代更節(jié)能，每瓦產(chǎn)生的 FLOPS 是 V3 芯片的三倍。

對 Cloud TPU v4 Pod 的訪問包括評估（按需）、搶占式和承諾使用折扣 (CUD) 選項(xiàng)，并提供給所有 Google AI Cloud 用戶。