夫が女性とサシ飲み許せる？許せない？

夫が職場の後輩女性とサシ飲みに行きたいと言うので「行ってもいいけど私は良い気がしないよ」と伝えたら
「やましいことないんだからご飯位いいじゃん」
「気が合う友達だから女ってだけで男女差別しないで」と言われました
誰か他に誘えば良いけどと言ったら2人共通の仲良い人いないから気を使うじゃん、2人じゃないと気楽に話せないじゃんとのこと。

性格的に浮気するとかは疑ってないんですけど、既婚者が独身女性とサシ飲みすることって他の既婚男性は普通にするもんですか？
友達作りを阻害してると言われ私が間違ってるのかわからなくなりました。
もし旦那さんが他の女性とサシ飲みしたいと言ってきたらどう思いますか？