Google Salฤฑ gรผnรผ yapay zeka modellerini eฤitmek iรงin kullandฤฑฤฤฑ sรผper bilgisayarlar hakkฤฑnda yeni ayrฤฑntฤฑlar yayฤฑnladฤฑ ve sistemlerin Nvidia’nฤฑn benzer sistemlerinden hem daha hฤฑzlฤฑ hem de gรผรง aรงฤฑsฤฑndan daha verimli olduฤunu sรถyledi.
Google, Tensรถr ฤฐลleme Birimi ya da TPU olarak adlandฤฑrฤฑlan kendi รถzel รงipini tasarladฤฑ. ลirket bu รงipleri, sorgulara insan benzeri metinlerle yanฤฑt vermek ya da gรถrรผntรผ oluลturmak gibi gรถrevlerde yararlฤฑ olmalarฤฑ iรงin verileri modellerle besleme sรผreci olan yapay zeka eฤitimi รงalฤฑลmalarฤฑnฤฑn %90’ฤฑndan fazlasฤฑ iรงin kullanฤฑyor.
Google TPU ลu anda dรถrdรผncรผ neslinde. Google Salฤฑ gรผnรผ, tek tek makineleri birbirine baฤlamaya yardฤฑmcฤฑ olmak iรงin kendi รถzel geliลtirdiฤi optik anahtarlarฤฑ kullanarak 4.000’den fazla รงipi bir sรผper bilgisayarda nasฤฑl bir araya getirdiฤini detaylandฤฑran bilimsel bir makale yayฤฑnladฤฑ.
Google’ฤฑn Bard’ฤฑ veya OpenAI’nin ChatGPT’si gibi teknolojilere gรผรง veren sรถzde bรผyรผk dil modellerinin boyutlarฤฑ patladฤฑฤฤฑ iรงin, bu baฤlantฤฑlarฤฑn iyileลtirilmesi, yapay zeka sรผper bilgisayarlarฤฑ รผreten ลirketler arasฤฑnda รถnemli bir rekabet noktasฤฑ haline geldi, yani tek bir รงipte depolanamayacak kadar bรผyรผkler.
Bunun yerine modellerin binlerce รงipe bรถlรผnmesi ve bu รงiplerin modeli eฤitmek iรงin haftalarca ya da daha uzun sรผre birlikte รงalฤฑลmasฤฑ gerekiyor. Google’ฤฑn PaLM modeli – bugรผne kadar kamuya aรงฤฑklanan en bรผyรผk dil modeli – 50 gรผn boyunca 4.000 รงipli sรผper bilgisayarlardan ikisine bรถlรผnerek eฤitildi.
Google, sรผper bilgisayarlarฤฑnฤฑn รงipler arasฤฑndaki baฤlantฤฑlarฤฑ anฤฑnda yeniden yapฤฑlandฤฑrmayฤฑ kolaylaลtฤฑrdฤฑฤฤฑnฤฑ, bรถylece sorunlarฤฑ รถnlemeye ve performans artฤฑลฤฑ iรงin ince ayar yapmaya yardฤฑmcฤฑ olduฤunu sรถyledi.
Google รyesi Norm Jouppi ve Google Seรงkin Mรผhendisi David Patterson sistemle ilgili bir blog yazฤฑsฤฑnda “Devre deฤiลtirme, arฤฑzalฤฑ bileลenlerin etrafฤฑndan dolaลmayฤฑ kolaylaลtฤฑrฤฑyor” diye yazdฤฑ. “Bu esneklik, bir ML (makine รถฤrenimi) modelinin performansฤฑnฤฑ hฤฑzlandฤฑrmak iรงin sรผper bilgisayar ara baฤlantฤฑsฤฑnฤฑn topolojisini deฤiลtirmemize bile olanak tanฤฑyor.”
Google sรผper bilgisayarฤฑyla ilgili ayrฤฑntฤฑlarฤฑ ancak ลimdi aรงฤฑklฤฑyor olsa da, sistem 2020’den beri ลirket iรงinde, Oklahoma, Mayes County’deki bir veri merkezinde รงevrimiรงiydi. Google, Midjourney adlฤฑ startup’ฤฑn bu sistemi, birkaรง kelimelik metinle beslendikten sonra yeni gรถrรผntรผler รผreten modelini eฤitmek iรงin kullandฤฑฤฤฑnฤฑ sรถyledi.
Makalede Google, karลฤฑlaลtฤฑrฤฑlabilir bรผyรผklรผkteki sistemler iรงin รงiplerinin, dรถrdรผncรผ nesil TPU ile aynฤฑ zamanda piyasada olan Nvidia’nฤฑn A100 รงipini temel alan bir sistemden 1,7 kata kadar daha hฤฑzlฤฑ ve 1,9 kat daha fazla gรผรง tasarruflu olduฤunu sรถyledi.
Bir Nvidia sรถzcรผsรผ yorum yapmayฤฑ reddetti.
Google, dรถrdรผncรผ neslini Nvidia’nฤฑn mevcut amiral gemisi H100 รงipiyle karลฤฑlaลtฤฑrmadฤฑฤฤฑnฤฑ รงรผnkรผ H100’รผn Google’ฤฑn รงipinden sonra piyasaya รงฤฑktฤฑฤฤฑnฤฑ ve daha yeni teknolojiyle รผretildiฤini sรถyledi.
Google, Nvidia H100 ile rekabet edebilecek yeni bir TPU รผzerinde รงalฤฑลฤฑyor olabileceฤini ima etti ancak ayrฤฑntฤฑ vermedi; Jouppi Reuters’e Google’ฤฑn “gelecekteki รงipler iรงin saฤlฤฑklฤฑ bir boru hattฤฑna” sahip olduฤunu sรถyledi.
