旦那さんから言われたなら離婚したほうが良いと思います
ちゃんと公正証書を作成して旦那さんの年収と子供の人数に見合った養育費を毎月支払ってもらう手続きを忘れないでくださいね
あと結婚年数分の財産分与と、相手の女性と旦那さんに慰謝料もちゃんと請求してくださいね
相手の女性の身元は調べておいたほうが良いです
旦那さんがごねたら法テラスか弁護士事務所へ