すごくDQNな手だけど、赤ちゃんを苛めれば確実に母子は出入りしなくなるよ。
「うるさい!」「だまれ!」と赤ちゃんに怒鳴るだけなら警察は来ないし。

それが嫌ならいったん実家にでも避難してから、
旦那や義親ときちんと話し合うしかないかもね。