前妻の子が通ってた幼稚園に通わせますか？

夫と前妻との子が通ってた幼稚園に通わせますか？

経緯としては
2013年6月__前妻と夫の間にA男誕生。

2017年4月__A男が幼稚園入園。

2017年9月__夫と前妻が離婚。前妻がA男を引き取り、幼稚園退園。保育園へ転園。

2017年11月__夫と私が結婚。

2017年12月__私がB男出産。

2021年4月にB男が入る予定の幼稚園なんですが、A男が通っていた園しか周囲にありません。

夫は「A男が幼稚園に通っていたのは半年だし、先生たちも覚えていない、気にしすぎだ」と言います。
でも小規模園ですし、夫の名字(A男もB男も名乗っている)がかなり希少な名字です。

バレるかな...皆さんだったらどうします？