産後2ヵ月なんですが、離婚を考えてます

出産して赤ちゃんの具合がよくなくて家から２時間かかる小児専門病院に赤ちゃんが入院中です。
産院から退院してきてから毎日お見舞いに行ってるのですが昨日ふと旦那が｢毎日行ったってわかるわけでもねーのに金の無駄だよ｣と言いました。その場では｢でも母乳届けないといけないし｣と反論したのですが、後からやっぱりなんか引っかかっていて離婚したいと思ってしまいます。
旦那の顔を見るたびその言葉を思い出してしまってイライラするし、もう触れられたくもないんです。
親に相談したら大袈裟だと怒られましたが、もうどうしたらいいのかわかりません。