先生は園児に始終目を配り安全に配慮する責任があるので、無関係の子供が関わって来るのは迷惑か迷惑じゃないかと言われれば正直迷惑(園児の安全を守るだけで手一杯)でしょう。
でも、場所が公園なんで別に主さんが遠慮する必要も無いし、主さんが自分の子供をきちんと傍で見守っていれば大丈夫ではないでしょうか。
あと、園のおもちゃを触らせないのはマナーです。(先生から触るなとはなかなか言いづらいので主さんの方で御配慮願います。)