近所の鍵っ子の親から文句言われたました

昨日、小３の子供の同級性で近所の鍵っ子が家の鍵を忘れたからと母親が帰宅（１８時くらい）まで居させてほしいと言ってきました。

その子は、去年２年生の時も同じ理由で３日連続で尋ねてきて３回目で親に連絡してからは私の家には来なくなり近所の同級生の家を鍵を忘れたと言って転々としてたみたいです。
今度も同じ事になると困るので「お母さんに事情を連絡して私の家にいる事伝えとくね。居場所が分からないと心配するから」って言ったら慌てて逃げてった。

一応、その子の母親には「鍵を忘れたと家に来ましたがお母さんに連絡を入れると言ったら逃げて行ってしまいましたが無事に家に帰れましたか？」ってLINEしたら・・・。

「子供を追い帰すなんて最低。心配してくれなくて結構です」って文句言われた。
自分の子供をまともに見れないのに偉そうじゃない？

そもそも、これって追い帰した事になるの？