簡単に言うと、主題じゃないことは細かく整合性と考える必要ないってこと。
これが叙述トリックのミステリーなら責められるべきだが、入れ替わりそのものが主題じゃないから。