口頭での約束不履行について

【質問したいこと】
以下の内容で、私の方に何か法律上不利になるような点はありますでしょうか。

【状況】
3年ほど前、マッチングアプリで知り合った人から、「一緒に仕事をしよう」と言われ、詳しい業務内容などは一切話されず、出資金として100万円を、次に会うときに持って来てほしいと口頭で言われました。そのときは「はい」くらいは答えたと思います。

冷静になり、お金を渡せない旨を翌々日に連絡したところ、相手から「先方に話してしまったので、今更できないというのは困る」と言われました。

仕事の内容も話されていないし、「先方」が誰なのかも知らされていないため、さすがにこの話はおかしいと思い、お金は渡していません。

その後、相手から、「借用書を作るからお金を出して」と、お金はとある投資に使うことと、その利率等の連絡がありました。

相手からは「お金を出すと一度言ったはずなのに、やらないあなたが悪い」というような内容で責められ、何を言っても話が通じないと感じ、連絡を無視しました。

数週間後、相手から「投資話は、なんとかなった」という連絡が来ました。
その後も不毛なやり取りは少しありましたが、着信等もすべて無視、今では相手とは連絡を取れないようにしてあります。
とはいえ、同じ地方に住み、少なくとも下の名前は覚えられていそうで、本名も見られている可能性もあります。
何か悪いことが起きないか怖くなります。
こちらに悪い点が無いかを知っておきたいので、ご回答のほどよろしくお願いします。

あなたにも落ち度がありますが、契約は不成立と考えて結構です。
今後いっさい相手にしないことです。
関りを持たないことですね。