ADSLリンクアップ速度が出ているのであれば、通信帯域は確保されていると
判断できるでしょう。

また、IP電話機能付きなら、IP電話の利用に問題ないか確認してほしいところです。
(音質がクリアならびに切断が無ければ、少なくとも実効速度300kbps程度が
確保されていると判断可能)

IP電話の利用に支障が出る場合
→ADSLモデムもしくはそれより上流(DSLAMなどの局内設備〜上流までなど)が怪しい。
 ADSLモデム交換をするのがいいかも。

IP電話の利用に問題が無い場合
→ADSLモデムもしくはそれより下流(PC端末側)が怪しいです。
 この場合もADSLモデム交換をするのがいいかも。

そんなわけで、一度ADSLモデム交換をしてみてはいかがでしょう?