そりゃあんた、無音と言うことは常に信号は0だがね。
音が少しでもあれば多少なりとも±に振れるんだから
そこで強制的に0にするからノイズが出るわけで。