無職の夫に冷めてしまって優しくなれない

夫の不貞行為を知ってしまって、夫への気持ちが完全に冷めてしまいました。
夫は謝ってくれて、無職になりましたが本心は分かりません。

話し合いがもっと必要なのは分かっていますが、夫からも話してこないし、私も夫と向き合うのが嫌で、上っ面の会話しかしていません。
目も合わせていません。

子供3人。上と下が娘、真ん中が息子。
まだ小中学生だし、お互いの2世帯住宅の持ち家で、別居や離婚は今すぐは難しいです。
下の子が中1の3月に離婚したいなと漠然と考えています。

とりあえず今は2世帯住宅の持ち家を選んだので、何もなかったかのように明るく優しく接しないとダメですよね？
子供がいる時は何とか出来るのですが、学校に行ってしまって、2人きりになるとそっけない態度を取ってしまいます。
同じような経験をされた方はいますか？
アドバイスほしいです。