GPT e transformers
GPT e transformers: GPT sta per ‘Generative Pre-trained Transformers’ Allora, cosa sono i transformers? I transformers mappano sequenze di vettori di input (x1,…,xn) in sequenze di vettori di output (y1,…,yn). I transformers sono composti da blocchi di transformer. Ogni blocco è una rete multistrato realizzata combinando semplici strati lineari, reti feed-forward e strati di self-attention…
Leggi tutto
