Aも厄介な人だから、今後の付き合い方を考えた方が良いかもね。
とりあえず「会社から四人までの会食は認められておりそれ以上人数が増えて万が一何かあると信用問題なのです。」を伝える。別日云々は、少なくとも自宅には招かない(コロナも心配だしあまり何度もランチはちょっと避けたい、とか何とか言う)。