離婚しないなら100万はかなりふっかけてるね。裁判すれば確実に金額を下げられる案件だし、求償権を使われたら慰謝料の半分は旦那が支払う事になるよ。不倫は一人だけの悪事じゃなくて主の旦那がいなきゃできない事だからね。
50万円でも不倫の慰謝料としては相場かそれよりいくらか高いぐらいだし、裁判にかかる労力や費用で悩むよりはその条件を飲んだ方が賢いよ。