夜間は回線速度は1〜4Mで朝方から20Mくらいに戻ります。
しかしその夜間でも
Webサイトは1〜2秒で開きます。(朝の20Mくらいの時は0.5秒から1秒)
勿論、混んでるサイト(ニコニコ動画とか)は別です。

★しかし、自分のホームペジだけが開くのが遅いのです。(10秒〜20秒)
朝はWebサイトと同じくらい普通に0.5秒から1秒で開くのですが。

要約しますが、普通のWebサイトは回線速度の高低は余り影響されず
開く時間が僅差ですが、当方のホームページだけが大影響を受けます。
これは、USEN GyaO光のサーバーに問題があるのですか？
当方のホームページに問題があるのですか？
(参考までに当方のホームページは20MのWebスペースで13Mを使用)