うちの地域では、隣の学区くらいの近距離転居なら
多少遠くなっても前の学校に越境で通い続けることがほとんどなので、
「わざわざ引っ越してきたの？」＝越境じゃなくて転校したの？
という意味で言っちゃうかもしれません。
その方も何の気なしに言っただけで別に変な噂とかではないと思いますよ。