離婚調停起こすしかないだろうね。子どもがいないなら愛人の所に転がり込んでも何しても本人たちの責任だけど子どもがいたら話が違うよ。子どもも混乱するし、お金の事もあるし。
帰りたくないから愛人と子どもの家で過ごすー！って、それは無理な話。