5年前の私の浮気を夫が未だ根に持っている

それまでは浮気をしたことはありません。5年前に私が一度だけ浮気してしまいました（相手は当時働いていた会社の未婚の同僚）。
その時に自分の親からもめちゃめちゃ怒られて、本当に反省しました。それ以来浮気は一度もしていません。
私のその浮気を夫が未だ根に持っています。先日夫と喧嘩した時に、そのことで暴言を吐かれて、まだ根に持ってるんだという言い争いになりました。
5年前の浮気を根に持つのは当然なのでしょうか？夫や男性だからなのでしょうか？