パートナーがお金持ちで僻まれる

パートナーがお金持ちで高級ブランド品をプレゼントしてくれることが多いです。
買ってほしいと言ったことは一度もなく、彼の趣味です。
彼が自分で欲しいものが最近はとくになく、それより自分が気に入ったものを身につけてほしいという想いからです。
なので身につけてるのですが、服なんかはシーインやGUなど元々着ていたものを着ていますし、自分で気に入ったのを買っていますし、自慢するような発言をしたこともありません。
ですが周りから僻まれることが増えて僻んでくる人があからさまにわかるようになりました…
仲良いと思っていたのに僻みだったんだ。と思ったり、傷つきます。
でも僻みを恐れてせっかく彼が買ってくれたものをつけないのもなんだか違う気がするし。
どうしたらいいのでしょうか