逃げ、なんて被害者的・防衛的な意味で拒否ってる人って少ないと思う。
そもそも「拒否」って言葉は、類似する意味の語群(例:遠慮や却下など)の中では、かなり強く否定する言葉です。
そういう攻撃的な度合いの言葉を名刺代わりに無意識に使えてる人は、本人は防衛のつもりでも実情は単なる自称に過ぎない。
逃げではないと思います。
嫌なら無理に人に合わせなくて良いと思います。
逃げじゃない。
もはや攻撃宣言。