別にFirefoxのproxy使うのにj:comうんぬんは関係ないと思うけど。
設定画面の名前のところに「proxyv.jcom~」なんたらかんたらとポート8080もしくは
すべてこの設定を使うっていうような項目があればそっちにチェックしてOKだと。
プロキシ名はJ:COMトップから加入者サポートへ行って確認するべし
現在Firefoxインストールしてないので詳細はわからないけどどのブラウザでも基本的に同じでそ。