Un llibre gratuït a arXiv explica les matemàtiques que hi ha darrere de la IA generativa
Tianhua Chen, investigador en aprenentatge automàtic, ha publicat a arXiv un manual de 195 pàgines que deriva pas a pas els fonaments dels models generatius, des de l'anàlisi de components principals fins als models de difusió i les GAN. Va adreçat a lectors amb curiositat matemàtica, no a qui busqui l'última arquitectura de moda.
The Little Book of Generative AI Foundations és un manual introductori, escrit per Tianhua Chen, que presenta els fonaments matemàtics de la intel·ligència artificial generativa amb un enfocament basat en les derivacions. En comptes de repassar totes les arquitectures recents o els detalls d'implementació, el text traça un recorregut coherent per les idees que connecten les grans famílies de models generatius.
El recorregut comença amb l'anàlisi de components principals (PCA) i la seva versió probabilística i continua amb els autocodificadors variacionals, els models de difusió, els fluxos normalitzadors, les factoritzacions autoregressives, les xarxes generatives adversàries (GAN), les GAN de Wasserstein i els models basats en energia. L'objectiu declarat és fer més accessible l'estructura del modelatge generatiu sense renunciar al rigor matemàtic necessari per entendre com es deriven aquests models i com es relacionen entre ells.
La segona versió, publicada al setembre, arriba a les 195 pàgines i hi afegeix explicacions visuals. El document és accessible gratuïtament al repositori arXiv, i l'autor demana comentaris i correccions a investigadors, professionals i estudiants.