もともとそういう青と赤だったんだよ。たしかに安っぽいがER-4と言えば実際それがトレードマークだった。
今みたいに黒一色になったのはごく最近。青赤は今となってはむしろ貴重。

枕に耳をつけるのは普通のヘッドフォンでもイヤホンでもやめたほうがいい。下手すりゃ断線や壊れたりする。
耳を付けたいなら片方か全部、素直に外しましょう。