あなただけが頑張る必要はないので、もう不妊治療はしなくて良いのではないかと。
トピ内をあまりきちんと読めていませんが、娘さんが彼を避けるのは、子供心ながらに、彼と合わない事を感じているからではないでしょうか。

このまま結婚生活を続けるならばもう、形だけの夫もしくはＡＴＭと捉えて、基本的に娘さんと２人で仲良く平和に過ごす（彼はもう無視しとく）ほうが、幸せではないでしょうか。経済的に助かったわ～程度で割り切るしか。

私がそうなんです。初婚ですが基本的に自分しか愛せないバカ夫なので、娘のウンザリした顔を見て、もう家族３人一緒に出掛けるのは夢物語として諦め、ディズニーランド等も娘と２人で行っていて、２人旅行でも娘は楽しそうです。