首席奏者達が「あの指揮者は勉強しなくなった」と思ったらすぐに離れるでしょう。
あと、ギャラが合うか合わないかの問題は大きいですよ。
もうひとつはレコード会社との契約が絡んでいて、呼びたくっても呼べない指揮者は多いです。
ショルティみたいに、大っ嫌いでも契約が縛っているケースもあるし。