教えてください！
縁が切れてしまいそうな人に勇気をふりしぼって元旦に出したメールが、
ほぼ24時間後に戻ってきました。
それは、Mailer-Daemonからで、

A message that you sent could not be delivered to one or more of its
recipients. This is a permanent error. The following address(es) failed:
相手のアドレス
Connection refused:
retry timeout exceeded

とのこと。これは単なるエラーと思ってよいのでしょうか？
それとも受け取りを拒絶されているのでしょうか？
（エラーに見せかけて、実は受信を拒否している、迷惑メール扱いされているという可能性もありますか？）
いろいろ探してみたのですがわかりません。
以前にも届いていないと言われたことはあるのですが、こちらにエラーとして戻って来たのは初めてです。
どなたか、ご教授ください！
よろしくお願いいたします。