panelのレイアウトがFlowLayoutで、
panel.add(button1);
panel.add(button2);
2個のボタンを追加すると左からボタン1、ボタン2と表示されるよね

addの順番を変えないで、表示の順番を変えることってできる？