ご近所問題

小4女の子小1男の子のシングルマザーです。
約1年前に斜向かいの家に引っ越してきたお宅が入学式で初めてお子さんがいた事を知り、同じクラスになりました。
5時になったらお家に帰ると教えていますが、5時過ぎやひどい時は6時過ぎに遊ぼうとインターホンがなります。
誘われたら行きたくなるのは言うまでもなく、宿題の途中でも飛び出して行ってしまいます。
斜向かいの家にお邪魔してゲームをやる日々です。
うちは17時までと決まっているのですみません。とお母さんにも話しますが、「うちは何時でも大丈夫ですから〜」と察してくれません。
宿題もまだ終わっていないので。と話しても「うちもだわ〜」と通じません。

最近では斜向かいのお家の子は習い事を何もやっていないのに、なぜボクだけやらなきゃいけないんだ！
なぜボクのうちは好きな時にゲームができないんだ！

と息子が言い出してしまい、反発がひどくなりました。
うちはうち、よそはよそと話しますが、納得いかない様子。渋々習い事をひとつ減らす事に。

斜向かいの子が土日も朝からインターホンを鳴らしなりストレスです。
習い事なんかやらなきゃいいじゃん！
5時過ぎてもうちは良いんだからいいじゃん！
と悪魔の誘惑が止まりません。
挨拶もできず、お菓子は無言で取っていきます。
悪影響しかないと思ってしまう私は毒親なのか神経質なのか、色々悩ましいです。