義家族との旅行

遠方に住んでいます。
義母が「お父さん（義父）がこれで最後の旅行になるかもしれないから…」と毎年毎年旅行に行かされます。
ちなみに義父は80歳ですが普通に元気です。
旅費や交通費を負担してくれる訳でもなく、ただ孫に会いたいからという理由で「これで最後かもしれない…」とばかり言って必ず会おうとしてきます。
距離感からして年に1.2回ならまだしも、6.7回は会わされていてストレスでしかありません。
義母は私に対して結婚して以来ずっと嫌がらせや嫌味を言ってくるような人です。
断りたいけど旦那は「父さんが最後かもしれないから…」と言って必ず行こうとします。
子供はまだ小さいので旦那と義両親だけでは見れず、私もついてきてほしいと言われています。
今また義両親の住んでいる地域から近い場所で旅行しようと誘われてます。うちからはかなり遠いけど交通費ももちろん払ってくれません。
あなたなら断りますか？
その場合なんて言って断りますか？