要は最初に、釣られたと言われたことが相当悔しいのですね。
だからこそ、俺が釣られたんじゃない、お前だ、お前が負け犬だ、と必死。
必死になればなるほど悔しさがありありと伝わってきます。