近い遠いじゃなくて、利用されてるようで違和感なんですよね。
事故させたら怖いし、なるべく車使わない近場でって言ってみたらいいと思います。気持ち言ってないなら伝わらないし、伝えてみてギクシャクするなら、それまでなんじゃないかな。
子供が学校行ってる間に、怪我したとかで呼ばれるかもしれないし、頻回に遠くにランチ行きたくないな。