せっかく付けた名前が嫌なアニメキャラと同じになってしまった…

生後三ヶ月の赤ちゃんがいます。
夫婦二人で悩んだり画数や意味もちゃんと考えて名前を付けたのですが、某漫画の嫌な登場人物(人気キャラではある)と同姓同名である事が判明しました。
私は知らなかったのですが、有名なキャラらしく色々な人達に「同じ名前だね、参考にしたの?」「あのアニメ相当好きなんだね」とよく言われます。

なんかもう本当に嫌で改名したいのですが、旦那は「折角名付けたんだし…」「もう少ししたら漫画も終わるよ」「そんなこと気にしなくていいんじゃないの?」と乗り気ではありません。

やはりこんな理由で改名するのは馬鹿げているのでしょうか…
今では子供の名前が本当に嫌いになってしまい、もう呼ばないで欲しくおもってます