ChatGPT potrebbe richiedere oltre 30.000 GPU: NVIDIA si frega le mani?

ChatGPT potrebbe richiedere oltre 30.000 GPU: NVIDIA si frega le mani?

Secondo gli analisti di TrendForce, nel prossimo futuro la richiesta di GPU da parte di ChatGPT potrebbe superare le 30.000 unità. Il servizio è stato addestrato finora su GPU NVIDIA, in pole position quindi per colmare la nuova domanda. Ma il boom dell'AI generativa potrebbe giovare anche ad AMD e Intel.

di pubblicata il , alle 07:31 nel canale Schede Video
ChatGPTNVIDIA
 

Recentemente il CEO di NVIDIA ha parlato di ChatGPT definendolo il "momento iPhone dell'intelligenza artificiale", una previsione che andrà verificata sul lungo periodo ma che arriva da una persona di riferimento del settore, da chi gestisce una società che da anni ha abbracciato l'AI a 360 gradi e con successo.

ChatGPT, Midjourney, Stable Diffusion e tutti i servizi che stanno spuntando come funghi richiedono un'elevata potenza di calcolo per restituire quei risultati che, dall'altra parte dello schermo, possono apparirci come vera e propria magia nera. E tra le principali candidate a offrire "i cavalli" che servono per rispondere a una mole di utenti che si farà via via sempre maggiore c'è proprio NVIDIA.

Secondo TrendForce, l'AI generativa diventerà uno dei principali elementi di fatturato per NVIDIA. La società di analisi ritiene che ChatGPT arriverà a richiedere oltre 30.000 GPU NVIDIA: un numero elevato se pensiamo che si parla di un unico servizio.

Prendendo come riferimento le soluzioni NVIDIA A100 basate su architettura Ampere, TrendForce ha stimato che ChatGPT richiedeva circa 20.000 GPU nel 2020 per elaborare i dati alla base dell'addestramento del servizio (180 miliardi di parametri).

Il numero è destinato ad aumentare in modo significativo in futuro, oltre 30.000 unità, con la sua evoluzione ed espansione. L'IA generativa richiede un'enorme quantità di dati, e usare un grande numero di GPU consente di accorciare i tempi di addestramento.

Cifre alla mano, NVIDIA potrebbe incassare dal solo ChatGPT qualcosa come 250-450 milioni di dollari a seconda che la società pratichi qualche sconto per commesse così ingenti oppure no (in genere si parla di 10.000/15.000 dollari per l'acceleratore A100). Non solo, NVIDIA offre anche sistemi "già pronti", come il cluster DGX, che conta otto acceleratori al suo interno.

Da qualche mese, inoltre, NVIDIA ha iniziato a commercializzare H100, il nuovo acceleratore basato su architettura Hopper che punta a offrire prestazioni nell'addestramento di AI diverse volte maggiori rispetto ad Ampere. H100, però, costa circa 30.000 dollari.

Nell'ultimo trimestre NVIDIA ha registrato ricavi in crescita dell'11% a 3,6 miliardi di dollari per la divisione Datacenter e con queste premesse il dato continuerà a salire nel corso degli anni. Non va infatti dimenticato che ChatGPT, grazie a un mega-accordo con Microsoft, sarà integrato praticamente in ogni soluzione della casa di Redmond, Windows compreso. E ciò richiederà molta potenza di calcolo e investimenti.

NVIDIA, chiaramente, non è l'unica a operare nel settore dell'intelligenza artificiale e anche realtà come AMD e Intel avranno la possibilità di passare all'incasso. La speranza è che questa potenziale richiesta di migliaia di GPU non vada a occupare le linee di produzione a tal punto da intaccare il business gaming, importante per NVIDIA e le altre, ma meno remunerativo, limitando la disponibilità delle schede video sul mercato.

12 Commenti
Gli autori dei commenti, e non la redazione, sono responsabili dei contenuti da loro inseriti - info
supertigrotto02 Marzo 2023, 08:41 #1
IBM sosteneva che le GPU vanno bene per le IA ma non sono l'ideale per queste cose,difatti ha dimostrato che roba a 8 e 16 bit semplice,va meglio di cluster di schede video.
Boh
UtenteHD02 Marzo 2023, 09:01 #2
Originariamente inviato da: supertigrotto
IBM sosteneva che le GPU vanno bene per le IA ma non sono l'ideale per queste cose,difatti ha dimostrato che roba a 8 e 16 bit semplice,va meglio di cluster di schede video.
Boh


Sicuramente e' cosi' come dici, forse per ora non abbiamo una tecnologia migliore da usare nelle AI e quindi usano le GPU.. boh..
supertigrotto02 Marzo 2023, 09:31 #3
Big Blue è stata la pioniera della IA e altre tecnologie,le GPU sono efficaci ma non efficienti,@UtenteHD,attualmente da come ha fatto intendere IBM,bisognerebbe costruire soc fatti ad hoc.
jepessen02 Marzo 2023, 09:33 #4
Originariamente inviato da: supertigrotto
IBM sosteneva che le GPU vanno bene per le IA ma non sono l'ideale per queste cose,difatti ha dimostrato che roba a 8 e 16 bit semplice,va meglio di cluster di schede video.
Boh


Non sara' l'ideale, ma e' una tecnologia affermata, disponibile e affidabile, e le aziende la vogliono adesso, non quando future tecnologie saranno pronte in massa in futuro. Inoltre anche quando saranno tecnologie pronte, dovranno superare la barriera d'ingresso di un mondo orientato alle GPU, con esperienza in quel settore ed una marea di codice e librerie gia' pronto... Non e' sempre detto che la tecnologia migliore diventi automaticamente quella piu' diffusa, l'importante e' arrivare per primi a superare la massa critica di adozione (vedi MP3 vs altri formati, VHS vs Betamax tanto per fare i due esempi fra i piu' famosi).
Saturn02 Marzo 2023, 09:45 #5
"NVIDIA si frega le mani?"

Secondo me hanno già "i calli", da parecchio !
UtenteHD02 Marzo 2023, 10:01 #6
Originariamente inviato da: supertigrotto
Big Blue è stata la pioniera della IA e altre tecnologie,le GPU sono efficaci ma non efficienti,@UtenteHD,attualmente da come ha fatto intendere IBM,bisognerebbe costruire soc fatti ad hoc.


Grazie per info.

Mi sa che con futuri chip e tecnologia appostiti di massa le IA saranno come nel film attuali, da vedere poi se nel positivo o negativo..
Opteranium02 Marzo 2023, 10:41 #7
ora che stanno smettendo i minatori cominciano le IA.. non c'è pace per le GPU (e i relativi prezzi)
voodooFX02 Marzo 2023, 12:07 #8
ma le mani non si sfregano?
randorama02 Marzo 2023, 12:23 #10
Originariamente inviato da: voodooFX
ma le mani non si sfregano?


gli juventini rubano le dita da quelle che stringono.

ops...

Devi effettuare il login per poter commentare
Se non sei ancora registrato, puoi farlo attraverso questo form.
Se sei già registrato e loggato nel sito, puoi inserire il tuo commento.
Si tenga presente quanto letto nel regolamento, nel rispetto del "quieto vivere".

La discussione è consultabile anche qui, sul forum.
 
^