先輩が私を子供の幼馴染をいじめた犯人と言って

まず最初に私はそんなことした覚えはないです。ほぼ言いがかりみたいな感じです。

最近転職しました。私の出身校を見た先輩が私の子供も同じ学校だと言って意気投合しました。
しかし先輩の雰囲気が変わってしまい理由を他の先輩から聞いたら、子供の幼馴染をいじめた犯人が私と気づいてしまったと言われてびっくりしました。

相手の名前を聞きましたが同じクラスだったのは確かです。でもいじめた覚えはありません。仲も良くなかったし接点自体少ないのに私は周りから嫌な目で見られてとても居づらくなっています。
上司に相談しても曖昧にされてしまいました。
やっと決まった転職先なのにどうしたらいいのでしょうか。