旦那だけ旅行

旦那がお盆休みの週末に泊まりで飲みをすると言われました。
趣味がミニ四駆なんですが、その関係の合宿兼飲み会と言い去年も行きました。
コロナの事で言われてるいまの時期にあり得ないと言いましたが、
多分女となんだと思います…
いままでも不倫も何回かあり、その度にキレられて、私が結局離婚まで決断できずに何とか離婚を回避してきました。その不満が爆発して言い合いになった際に旦那から離婚を言われてて、それが２年前なのですが、それから何か私が意見すると逆ギレか不機嫌になり無視です。
自分のいままでの対応がいけなかったのもありますが、旦那がこのまま好き勝手してるのに限界が来てます。
こっちが離婚を言うのを待っているのかもしれませんし、何か言えば結局キレて家庭も捨てるくらい何とも思ってないと思います。
自分１人で子供３人育てられる自信もないですが、このまま子供達に嫌な思いもさせたくない、自分も我慢ばかりの生活、お互いを思いやれない関係に疲れてきました。
泊まりでまた家族の車で女と旅行行かれるのがすごく嫌でたまりません。
証拠を掴みたいとも思いますがお金がないので何か方法はないでしょうか？
長文すみません、よろしくお願いします