車に乗せてもらったお礼を公共交通機関を使った場合の代金分支払った

以前、車に乗せてもらったお礼として、現地までの公共交通機関を往復で利用した場合かかる分だけの お礼を図書カードでしたのですが、それからたびたび その人から「乗せていってあげる」と言われるようになりました。
他の人と一緒に行くことになっていたり、自力で行くからと言っても しつこく言ってきます。
金券目当てなのだとは思います。
困っているのは、他の人と行くことになっていると、わざわざ その人に「主さんは私が乗せていくから！！」と勝手に相手に断りを入れてしまいます。
どうしたら良いですか？