義両親が私の帰省についてくる

先日義母から「久しぶりに○○県（私の地元）へ遊びに行きたくなったからゴールデンウィークにあなた達が帰る時に付いて行こうと思ってたけど今年は帰らないって言われて残念だったわ。また帰る予定がある時に声かけて」って言われたんですが、あり得ないですよね？
何か一緒に帰った時の予定まで考えてあって「○○県に着いたら××に行って何とかって言うホテルに泊まって次の日、私の実家にお邪魔する」って話してました…。
夏休みに帰る予定ですが、言わずに帰るかハッキリ断ってから帰った方がいいか悩んでます。