우선 감사드리구요

entropy 가 0이라고 표현한것은 오타였구요 양수라는 표현이 맞겠지요
수정하도록 하겠습니다.

다른 질문에 대해서는 그래프와 같이 다시 올리도록 하겠습니다.

지적 다시 한 번 감사드립니다. ^ ^