Tag: entropy
All the articles with the tag "entropy".
-
Redes neuronales como sistemas de compresión con pérdida
Publicado: a las 21:00Entrenar una red neuronal es construir un compresor con pérdida. De Shannon a DeepMind, una exploración de la equivalencia entre predicción y compresión de información.
-
De Boltzmann a ChatGPT: de la física estadística a la IA
Publicado: a las 02:23Las ecuaciones de la física estadística son idénticas a las que permiten que un LLM prediga la próxima palabra.