Teoría de la Información y Termodinámica

El otro día introducimos la entropía como una medida de “Información”, asignándole a un evento con probabilidad p una cantidad que de  alguna exprese cuanta “sorpresa” nos genera observar ese evento, o cuanta “información” ganamos al hacerlo. Como motivación adicional para el uso de la palabra “información”, mencionamos además que la cantidad que definimos como entropía tiene una interpretación operacional clara en términos de los recursos que se necesitan para transmitir un mensaje. Para los que quieran saber mas al respecto, una introducción sencilla e informal al tema pueden ser estos dos artículos:

1) Information is surprise (esto es lo que explicamos en clase, mas o menos)

2) Information is bits

Aunque hay infinidad de material al respecto (la página de wikipedia es una buena fuente de referencias).

No es casualidad que esta noción de información este relacionada con la entropía termodinámica descubierta muchos años antes. La relación entre la teoría de la información y la termodinámica tiene una historia larga y muy interesante, que se extiende hasta hoy. De nuevo, para el que le interese, los siguientes son algunos de los temas que exploran esta relación:

1) Principio de Landauer: el borrado de información está siempre acompañado de un aumento de entropía (por ejemplo, disipación de calor). Este principio puede ser usado para resolver la paradoja del demonio de Maxwell, como se explica en este artículo que recomiendo mucho: Demons, Engines and the Second Law.

2) Principio de Máxima Entropía de Jaynes: la termodinámica puede ser planteada como un problema de inferencia dada cierta información sobre un sistema. Desde este punto de vista la entropía no sería una propiedad objetiva (“física”) de un sistema sino una medida de cuanta información tenemos sobre el (lo cual no debería resultarles fácil de aceptar… ni de rechazar :P ). De esto quizás hablemos un poco cuando terminemos de ver ensambles.

3) La termodinámica de agujeros negros y el principio holográfico también tienen que ver con la relación entre entropía termodinámica e información.

Nahuel.

Greetings from Kuala Lumpur!

https://images-na.ssl-images-amazon.com/images/G/01/videogames/detail-page/B001JKTC9A.04.lg.jpg

En la última clase teórica mencioné que hace un año un grupo de científicos demostró que obtener ciertas propiedades macroscópicas a partir del conocimiento preciso de las leyes microscópicas de un sistema es indecidible. El problema particular que consideraron es el de calcular la diferencia de energía entre niveles de un superconductor (el “gap espectral“), conociendo completamente la física microscópica del sistema cuántico.

Que este problema sea indecidible significa que es imposible construir un algoritmo general que siempre de la respuesta correcta (pero no significa que el problema particular no pueda resolverse). En otras palabras, puede existir un algoritmo que permita obtener la respuesta para un material particular, pero que para otro material el mismo método no sirva. O, como dicen los autores del trabajo, “no puede existir un método general que permita determinar si un material descripto por la mecánica cuántica tiene un gap espectral o no.”

La demostración de indecibilidad se realizó mostrando que el problema es equivalente al problema de la parada de Turing. Mas allá de los detalles técnicos, el resultado puede ser muy perturbador para los que esperaban que el curso de mecánica estadística les permita justificar todo lo que no comprendemos de la física macroscópica a partir de fenómenos microscópicos (¡que probablemente tampoco comprendamos muy bien!). Para los que quieran saber mas, pueden leer una nota en Phys.org, o el paper original en la revista Nature (disponible desde la red de la facultad):

¡Cambio de planes!

Image result for blackboard pacific rim

A causa de una serie de eventos inesperados que ocurrirán en los próximos días en el océano Pacífico y en el Mar de China Meridional, vamos a tener que introducir unos pequeños cambios de último momento en el cronograma. En la clase de hoy vamos a tener teórica durante toda la clase. El pizarrón va a quedar mas o menos como el de la foto. Los próximos miércoles y lunes tendremos práctica, y el miercoles siguiente retomamos la teórica, con tres horas de teórica y dos de práctica. Esto nos permitirá mantener la carga total de horas de la materia, y no atrasarnos con los temas aún si en el océano Pacífico aparece un kaiju (怪獣).

Luego de los cambios en estas cuatro clases volvemos al ritmo habitual. Los planes que teníamos para la clase del próximo miércoles quedan pospuestos hasta nuevo aviso.

Aclaración importante: Para despejar cualquier posible duda, la clase pública del miercoles 5 quedó suspendida. Las clases prácticas del miércoles 5 y lunes 10 comenzarán a las 17 hs, y se realizarán en el aula 8 del pabellón 1 (el aula donde usualmente tenemos clases).

Feynman y las teorías científicas

El lunes comenzamos con ensambles estadísticos, tratando de construir una teoría microscópica que sea compatible con la termodinámica. Como mencioné en clase, el enfoque se va a basar en encontrar qué hipótesis sencillas nos llevan a estados de equilibrio compatibles con los de la termodinámica clásica y cuales no. Como motivación, les dejo el link a una clase brillante de Richard Feynman en la que explica su visión sobre como se construye una teoría. Alcanza con mirar el primer minuto:

En el video Feynman dice que la búsqueda de una nueva ley comienza “adivinándola” (“first, we guess it“). Luego se derivan consecuencias y predicciones a partir de esa ley “adivinada”, y se verifican las predicciones con experimentos. Y a continuación Feynman es categórico: “If it disagrees with experiments, it’s wrong. And that simple statement is the key to science. It doesn’t make a difference how beautiful your guess is, it doesn’t make a difference how smart you are, or who made the guess or what his name is, if it disagrees with experiments… it’s wrong.”.

Los que ya vieron el video, pueden volver a verlo. ¡Porque los clásicos nunca pasan de moda! Y sobre todo, porque si siguen mirando y escuchan a Feynman durante los 10 minutos que dura el video, van a encontrar otros opiniones interesantes de Feynman sobre pseudociencias y el método científico en general.