確かに
FADD命令　レイテンシ3、スループット1/サイクル
FMUL命令　レイテンシ5、スループット1/2サイクル1,2
FDIV命令　レイテンシ-単精度17サイクル、倍精度36サイクル、拡張精度56サイクル

割算以外では単精度にしても早くならないね。