集合住宅だと2.4Ghz帯の混雑気になるな
4本以上飛んでれば確実に干渉するし
モバイルルーターやスマホテザリング使ってる人が夜帰宅したりもあるし…
BBユニットや無線親機の不具合の可能性もあるし5Ghzでも解決できないかもしれないが
アプリやPCソフトで電波状況計測してみたらいかが？