子供が大変だった時に女に夢中だった夫と離婚したい

一人娘は吃音です。小学校低学年からイジられ続け、励ましながらの小学校生活。療育やトレーニング施設を駆けずり回り、娘に合う居場所を探すのに必死でした。
あまりのストレスに、私は胃潰瘍で入院しましたが、夫は何一つ娘のために動きませんでした。
私の仕事も、平日は娘ファーストで動かざるを得ないので、土日限定の仕事を続けてきました。
学力が落ちると余計に学校に行きたがらなくなるので、勉強も全教科シッカリと見ました。　幸い娘は勉強好きだったので、高校も進学校に合格、気のあう友人も数人出来て、大学も合格、無事卒業。
　社会人1年目ですが、理解ある人に恵まれ順調です。　

夫は何をしていたのかというと、娘が小学生の時から部下(女)に夢中でした。
部下が独立するので、それを手助けしたり。プラトニックな関係で繋がっている！と開き直っていましたが、女が別の男性と結婚するとあからさまに落胆し、金を返せと女に詰め寄る事を、去年やらかしました。女の夫に追い払われて、うちに戻ってきました。

夫が社会人生活を満喫する娘を見て
「キミが、娘のために最善の道を選んで、娘のために最善の努力をしたから、娘は幸せなんだね！いやー娘の吃音酷かったもんねー　(ここで、娘の吃音のマネ)　どうなるかと思ったよー、これからも、家族みんなで頑張っていこう！ヨロシクね！」
と言ってきて、ゾワッとしました。
娘の吃音の真似をした瞬間に、もうムリと思って緑の紙を持ってきたら、急にゴネだしました。　なんでここまで娘や私を馬鹿にして結婚を継続したいと思うのでしょうか？