>パケットが小さくなると相手の応答速度、経路の問題で遅くなるんだよ。

パケットサイズはMTUで決まるでしょ。
違う?