全く同じ経験があります。待たずにいけばいいと思います。文句を言う人はどこにでもいます。言った方はすっきりするでしょうけど、言われた側はずっとモヤモヤしますよね。文句を言う人は我が子しか見えていないんだと思います。だから謝罪をされることはないんだと思いますよ。
子供達が安全な場所に集まり、時間がきたら登校する！それに尽きると思います。