NTT側のプロバイダ向け設備（責任はNTT）もあれば
NTT内にあるプロバイダ側設備（責任はプロバイダ）もある。

速度に関して言えば、どっちに原因があるかは簡単に分かる。
1.フレッツ網の測定サイト（サービス情報サイト）内で測定してみる。
2.インターネット上の測定サイトで測定してみる。
1と2の速度差が極端にあれば、それはプロバイダ側が原因。