Tag: entropy
All the articles with the tag "entropy".
-
Redes neuronales como sistemas de compresión con pérdida
Published: at 09:00 PMEntrenar una red neuronal es construir un compresor con pérdida. De Shannon a DeepMind, una exploración de la equivalencia entre predicción y compresión de información.
-
De Boltzmann a ChatGPT: de la física estadística a la IA
Published: at 02:23 AMLas ecuaciones de la física estadística son idénticas a las que permiten que un LLM prediga la próxima palabra.