隣の土地は借金しても買え

と言います。
主さんが今の売出し価格に納得しているのであれば
隣人さんにその価格のままでの個人売買を申し出ては如何でしょうか。
隣人さんにしても不動産業者に支払う分が入るし
「どう思われて買われたんだろう」と
変な気を回さなくて済む気がします。

不動産取引に精通した司法書士を入れれば可能ですよ。