정보 엔트로피
요약 : 확률이 낮을수록, 어떤 정보일지는 불확실하게 되고, 우리는 이때 ‘정보가 많다’, ‘엔트로피가 높다’고 표현한다.
엔트로피
여기서 열 엔트로피는 계와 주위 모두에 존재하지만, 계를 제외한 모든 곳을 지칭하는 주위에서 위치 엔트로피의 변화는 너무 광범위하게 이루어지므로 그 변화를 무시할 수 있고, 주위가 갖는 엔트로피 변화에 가장 큰 영향을 미치는 것은 온도, 즉 열 엔트로피이다. 이 때문에 주위의 엔트로피 변화를 열 엔트로피 변화라고 할 수 있다. 그리고 이와 같은 관점에서 계에서 열 엔트로피변화는 분명 존재하긴 하지만 위치 엔트로피의 변화가 더욱 계의 엔트로피변화에 큰 영향을 주기 때문에 계의 엔트로피 변화를 위치 엔트로피의 변화라 할 수 있다.