主人が女性とﾒｰﾙ 何度言っても治りません

主人は何度も女性とﾒｰﾙをしていてその度喧嘩になっていました。彼曰く、只の昔からの友人だそうですが、恐らくｷｬﾊﾞｸﾗやｽﾅｯｸの女性で友人ではありません。そればかりでなく、有料ｱﾀﾞﾙﾄｻｲﾄも利用していました。恐らく現在も女性とﾒｰﾙをしています。毎回、私は勢いで離婚だと言いますが彼は応じません。私も彼が好きだし、別れたくはありませんが精神的に辛く、彼の癖が治らないのならば離婚したいと考えています。素直に離婚には応じてくれないと思うので裁判所へ離婚を申し立てようかと考えています。私は現在心療内科に通院していて、医師からの診断書等があれば正当な理由になるでしょうか?