関係ないということはない。
単純に確率の問題。

奥さんと子供が二人いる平均的な家庭をもつ男性と
結婚しなかった男性では、当然確率的に後者の方が無縁仏になる確率が高い。

「無能な家族をもった既婚男性」と「独身男性」が同じ目に合うというだけで
「すべての既婚男性が無能な家族をもつ」ということでは無い以上、無関係とはいえない。