感兴趣。在传统热力学中，熵被定义为对系统的宏观测定，并没有涉及概率分布，而概率分布是信息熵的核心定义。根据Jaynes（1957）的观点，热力学熵可以被视为香农信息理论的一个应用：热力学熵被解释成与定义系统的微态细节所需的进一步香农资讯量成正比，波兹曼常数为比例系数，其中系统与外界无交流，只靠古典热力学的巨观变数所描述。加热系统会提高其热力学熵，是因为此行为增加了符合可测巨观变数的系统微态的数目，也使得所有系统的的完整叙述变得更长。（假想的）麦克斯韦妖可利用每个分子的状态信息，来降低热力学熵，但是La