今まであなたとの関係が良かったなら、きちんと話した方がいいと思うよ。我が子にまで影響があるのは酷いし、あなた自身も傷ついているんだよね。それは実の親子でも、人と人の付き合いとしてやっちゃいけないと思う。
でも、これまでも関係が悪かったなら、これを機に大きく距離を置いてもいいと思うよ。