お店のお客様と関係を持ってお金を借りて返金に困っている場合

去年の冬頃から知り合い、体の関係で1回会うごとに2万円ほど貰っていました。がお金が厳しく、前払いで貸してもらうという内容で借用書ありの契約をしました。20万円借りたのですが、1回目会って以降に私情で会えなくなり、残りの18万円は少しずつ返していくという話になりました。それが2月半ば頃の話です。気を使って頂いて、15万円でいいよといってくれましたが、月1万円も難しかったので、少しの期間待ってくださいと伝えました。
4月頃に相手の男性から返済はまだですか?と聞かれましたが、まだ余裕がなかったのでもう少し待ってくださいと伝えると早めにお願いします。と返信が来ました。そして、月5千円ずつの返済でもいですかと聞きました。構いませんよとおっしゃられたので、余裕が出来たら返していこうと思いましたが、6月3日に残念ですと連絡が来て、因果応報とは知っていますか?いつか自分にかえってくるということですりお元気で。と連絡が来ました。私は返すつもりもありましたし、待ってくれとも伝えたので、大丈夫かと思っていたのですが、返信に困り6月8日に遅くなってすみません、来月の頭から振込みますと連絡させてもらいました。
私は今年21歳で何もわからずなので、訴えられたりするかなと思ってご相談させてもらってます。
相手の方は妻子持ちの50代か60代くらいだと思います。詳しくは聞いてなので。

訴えて来ることはないです。
実体は、愛人契約ですから。
法的には、返済義務はないですが、あなたが、
コツコツと返済するのはかまいません。

お返事ありがとうございます。参考になりました。
相手の弟さんが警察の方という話を聞いていたので少し不安になっていました。因果応報とは知ってますかと言われた時点で返さなければなんかされるのかなと思ったのでひやひやしてます。