遅くない。
今は幼稚園児と高学年が一緒にならないように何曜日の最終の時間は園児不可とか高学年から水泳をスタートできる環境のスクールもあるし。
知り合いには小５から習いはじめて中２で選手コースに引っ張られた子もいます。

何かを習うのに遅いなんてありません。
トップ選手を目指すには遅い競技もあるだろうけど、その競技を楽しみたい、できるようになりたいなら全てでスタートが遅いからダメなんてないと思います。