私と付き合ってると勘違いしてる男性からの借金、返したほうがいい？

その男性とは７年くらい前に婚活で知り合った
会うまで相手の容姿わからなくて、会った瞬間に「なし！」と思ったんだけど
メッセージのやり取りをしてる分には感じの良い人だと思ってた

当時、私も離婚した後に付き合ってた男性と別れて寂しかったこともあって
月に１回くらい会って、お茶したり、美術館に行ったりする関係を続けてきた

私はずっと経済的に大変で、彼にお願いして最初、20万円貸してもらった
それが返せないまま、また20万円借りて、10万円借りて・・・と７年間で100万円くらい借りてる

彼はそれを気にしているみたいだけど、催促はしてこない
ただ、それは私と付き合ってると勘違いしてるからだろうなと思う

私は私でご縁がなくて、ちゃんとお付き合いする人ができないままでいるんだけど
もう40代半ばになるから、最後のチャンスだと思って本気の婚活をしたいと思ってる
でも、その前に彼に付き合ってるつもりはないと伝えておかなきゃいけない気がする
それを言ったら、お金を返すように言われる気がして・・・

今、20万円くらいだったら返せないこともないんだけど、伝える前に返したほうがいいかな？