上司から食事に誘われてます

明日は定休日なんですが、上司から食事の誘いがきました。
普通の上司と部下の関係なら行ってたかもしれないんですが
普段から私に見つめながら「可愛いねぇ」とか言ってきたり、距離感バグってるので上司から少し離れたら「俺のこと嫌いなの？」とか聞かれます。
私は入社して2ヶ月で、上司は支店長という立場なので色々言いづらいんですが…

私は40歳で、上司は一つ上です。
年齢が近いから普段からよく話しかけられるんだと思ってましたが、最近何か違うな…と察してきました。
お誘いメールはどう返したらいいでしょうか？
まだまだ仕事上で未熟なので、気まずくなったり嫌われたりはしたくないです…。
異動も考えるべきなんでしょうか？
そうなったら本社にこの事は伝えるべきですか？