知り合いに借金がある。

3年前位から、知り合いの60代のおじさんにお金を借りてます。無職だった為、お金に困ってたら、ちょこちょこ貸してくれてました。おじさんとは、遊び場が同じだった為、毎日の様に顔を合わせてました。
しかし今、仕事を始めた為、私がその場に行かなくなり会わなくなり、、、たまに電話するのですが、電話するのが決まって、メールで先方が責めてくるときです。
お金は必ず返すと何度も言ってるのですが、やはり毎日会って話してた時と違い、数週間会わないとなると、先方が色々悶々と勝手に考えて結論を出し、あなたのことがわかりません、さよなら。お金は早く返してください。等と入ってきます。
借りる際は、返してもらうつもり無いとか、何時でも良い。と言ってたのですが、(そう言われても私はきちんと返すしとつたてました。)揉めると脅し?まではいきませんが、一方的に私を悪く言ってきます。
おじさんは、私に好意を持っていて助けてくれてます。
嫌でしたが、身体をと何度も言われ、提供してお金を貰ったことも何度かあります。
借りたお金はメモってますが、身体を提供してお金を貰うはずだったのに、あぁだこうだと言われ、借りたのか貰ったのかわからない物が数件メモにもあります。

今日、おじさんがメールしてきて、貴方のことを1ヶ月忘れよう、忘れようと頑張り忘れることができました。お金は返さなくて良いとは言えないので、宜しく。
と普通にメールきましたが、気にシィの私は電話しました。
するとなんか、他に気になるひとできたらしく、楽しみが出来たのでと言われました。
お金の話になり、貰ったか借りたか揉めてどちらになったかわからないものがあると伝えました。おじさんは、まぁ曖昧な部分もあるから、メモってる額のある程度で良いと言ったり、50万は余裕で超えてるけど、50万は必ずやねと言ったり、
話がまとまりません。しまいに、あなたにどれだけ尽くしたと思ってるの?なのにあなたは、連絡もせず何してるかもわからない。あなたのことわからない。人間の本性をみた等と私を悪くいいます。この言葉は、毎回責めてくるたびに言います。

お金を借りてる以上強く言えず、いつも揉めないようにと我慢しています。
本当は、凄く言いたい事沢山ありますが、上手く人に伝えるのが苦手で伝わりませんし、我慢して飲み込んでいることもあります。
それに、おじさんは、人が話してるのに、被せて喋ってきて、聞こうとせずかなり文句言って切れてきます。
だからいつも話がまとまりません。
結果いつも私が責められます。
お金を借りてるからという立場から、揉めたら怖い等と思い我慢してますが、私だけが悪いわけではないと思います。

誰も返さない等とは一言も言っていないと伝え、後々また、このように責めたり脅したりしないでと約束を何度もして、わかった!と言うのですが。。。
実際、揉める度に振り出しに戻ります。
私より20歳以上歳上なのですが、ここまで話しの通じない人は初めてで参ってます。
でも、私が悪いと思い我慢してます。

何処かから借入しておじさんに返して縁を切ろうと思うのですが、だいたいメモを計算して57万くらいなのですが、借りてるか貰ったか曖昧になってる、一件を引いて50万でよいですか?と言ってみようと思うのですが。。。本来曖昧になってるのは、あと数件ありますが、多分50万でも納得しない気がするので、とりあえず1件だけ引かせてもらってと考えてます。

私が気が弱いのと、芯がない、立場が弱い等ということもあり、
おじさんが言うことにいちいち、敏感に反応してしまい、ムカつく半面怖いです。
数人共通の知り合いもいるのですが、返さないならその人達にも相談してどうしたら良いか考えるから、などとビビらせてきます。
何だか支離滅裂ですが、
どのように対処すれば、うまくいくでしょうか??ご教示頂けましたら助かります。

縁を切ることです。
弁護士のサポートを受けて、方針を固めるといいでしょう。
方針が決まるまで、余計なことは言わないことです。

ありがとうございます。弁護士さんに依頼するお金なども厳しいので、、、
なんとか早く縁をきりたいですが、、、