下校トラブル　一緒に帰りたくない

四年生です。
学校内では問題なく付き合えているけど、一緒に下校したくない相手がいます。一緒に帰るとその子が原因でのトラブルが高確率で起こったからです。（他の子との喧嘩や、道草、泣く、ワガママなど）

でもその子は我が子と帰りたいから、断っても断っても誘ってきます。もう半年以上ずっとです。

誘われるのはほぼ毎日。断るので別々に帰ることが多いけど、勝手についてくる時もありますし、仕方なく同意したものの道草して遅いからと置いていくこともあります（うちの方が遠いし早く帰りたいので）

とにかくしつこく誘ってくるのが我が子は苦痛だそうです。その場で一回断ってもしつこく粘って誘ってくる、を週に何度かやるので、うんざりしています。

こういうのって、どう対処したら良いでしょうか…