微積・線型代数・常微分方程式の基本をマスターしてるなら、
いきなり大学物理から始めた方がシステマティックに学べる分わかりやすいかも。
…とイイカゲンなことを言ってみる。
高校物理は由来のはっきりしない公式暗記も必要だからね。

まあ、高校物理が難しく感じるのは、そもそも現象を理解していないせいだと思うけど。