皆さんコメントありがとうございます

距離を置くってのも考えて実行したりもしたんだけど、「前はもっと会えてたのに近所に住んでから会えなくなった」って旦那に愚痴っててしばらくして私にも直接言われてしまった
(産まれたばかりの頃は車で1時間程離れたアパートに住んでたけど週4～5会いにきてた)
今は3日会わなければ「最近会えてない」「久しぶり」と小言を言われる

平和じゃなくなるのを覚悟で私が「会わせません」って言うしかないかな
ちなみに今は同じ町内で持ち家