＞IEの履歴ウィンドウみたいなのあるじゃないですか？

あれはBrowser Extension の Explorer Bar
http://msdn2.microsoft.com/en-us/library/aa753587.aspx

＞あれってMFCの機能で実現出来るものですかね？

本人次第