444 さんありがとうございます。一応その方法も検討したのですが、
永続的に MouseEvent を拒否したいのではなく、その都度切り替えたかったので
setEnable のように簡単な方法がないかな〜と。
結局、removeMouseListener する前に現状のリスナーを保存しておき、後で戻して
やるしかなさそうですね。どうもでした。