返す必要はあるのか。

元彼からまだ未練があること、許して欲しいという意味も込めてお金をあげると言われました。(慰謝料のようなもの)条件は、俺の気持ちを受け取っていただければとのことでした。
月一の2ヶ月間で100万円頂きました。
3ヶ月目から、大体10万円程もらうことになっていたのですが、さすがに貰いすぎだと思い、受け取りを断りました。

すると今まであげた100万円を返せと言われました。
最初の話し合いで返すことなんて言っていませんでしたし、もらったお金なので返す必要はないと思うのですが、

また、返せ返せと圧倒されて、返すとメールで言ってしまいました。。

その場合、返さなかった時、
わたしは、なにか罪に問われますか?

>その場合、返さなかった時、
>わたしは、なにか罪に問われますか?

罪に問われることはありませんが、返すと言ったのであれば、返済の義務は生じてしまいます。

返済の義務というのは、もし返さなかったどうなるのですか?

相手方次第ですが、裁判を起こされるようなこともあるかもしれません。

返すこと前提に借りた訳では無いです。
脅されて、返すと言ってしまいました。
裁判を起こされたら、勝てるのでしょうか。

万が一裁判を起こされた場合、脅されたという証拠が必要になってくるかと思います。