昨日、講義でエントロピーを習ったよ！　情報理論だっけかな？
そんときは -p*log_2 p は情報量みたいな言い方してた．

まだ，勉強してないからあれだけど
「エントロピーとは、理論的に達成可能な圧縮限界のこと。」
なんていわれると激しく違和感を感じる．