主は社員？同じパートなら、おばちゃん達と接する機会も多いだろうし、逆に味方につけるのも有りだと思ったけど、転職先探してるなら早めに動いた方がいいと思うよ。
その男性社員にハッキリ言ったところで周りには何も害はないだろうし、本当に迷惑ならそれはきちんと言わないといけないと思う。