職場のおっさんにつかれる

専門職の小さな職場で働いてます
男性２名女性３名で、このうち男女１名ずつが上司でほぼ所外での仕事をしてます
内勤が残りの男性１名女性２名で上限関係はありません

で、この男性がめんどくさい
悪い人じゃないんだけど、事務所の管理（総務みたいなもん）担当だからか、ホントいろんなことに首を突っ込んでくる
女性二人でたわいもない話をしてても「なになに~」って割って入ってくる
そのたびもう終わった話を一から説明しなきゃなんない
ほんっとどうでもいい雑談でもしつこい
女性二人の話に勝手に相槌入れてきたり、口を差し挟んだりとかで辟易してる
悪い人じゃないし、悪気がないのもわかってはいるんだけど、お前に話してんじゃねーよって気分になる

正直、あんまり男の人に入ってきてほしくない話とかもある（体のこととか）
やんわりその話は終わった・・・みたいに言っても食い下がってくる
最近ではその人には内緒で女二人で飲みに行ったりしてる
波風は立てたくないけど、ちょっと空気読めよって言いたくなるわ

ただの愚痴なんで、お説教やアドバイスはご遠慮させていただきます
似たような環境の方の愚痴でも聞かせてください