元カレから金銭を要求される

元カレからお金を返せというのと、その際、直接会うように要求されます。しかし、付き合っていた時はお互いお金にルーズだった為に、いつ何円貸し借りがあったかは不明です。また、彼は必ずと言っていいほど月末になるとお金が足りなくなるので貸していました。給料が入ると返してくれていましたが、足らない月もありましたが咎めることなく流していました。私も確かに借りたことはあったと思うのですが、金額も覚えてないですし、でも絶対彼よりは借りてないし、私は何度も返してないお金あったかと確認しており、その際彼はないと言っていたのに、急に返せと要求してきました。

別れた後に、自傷行為やストーカーに近い行為を受け、警察も介入しています。
警察から避難するように言われたので実家に帰ったのですが、今度は実家に来ると手紙や連絡が入るようになりました。
引っ越し代もかかったし、彼が鍵を盗んだことで鍵の交換代も管理会社から請求されています。鍵については、警察が確認してくれています。防犯カメラに彼が鍵を持っている証拠はありますが、彼が持っていないと言えば、私が払うしかないようです。
彼は何も変わらず生活をできているのに、
私は元々住んでいた家と実家が県を跨ぐので、
仕事もやめて、家も引っ越ししてと、とても労力とお金がかかっています。

警察は金銭に関しては関与ができないので、彼が金銭目的で接近してきたとすると、何もすることができません。金銭的な理由があることがよくないので弁護士に相談してくれと、でないと警察も動けないからと言われました。

実家にはまだ学生の妹がおり、怖い思いをさせたくありません。
どうにか、実家には来ないようにしたいのと、
払う義務があるのかどうか、ハッキリさせたいです。

払う義務があるのかどうか、ハッキリさせたいです。
→交際関係中の貸し借りの経緯によっては、贈与と評価されて返金の必要がない場合もあります。
また、贈与と評価されず貸金と評価された場合でもあなた側も貸金があるのであればその貸金との相殺の主張もできる可能性があります。
いずれにしても具体的な経緯によりますし、警察が介入するような相手であればこの場での相談で解決する内容ではないと思われますので、早期にお近くの法律事務所でご相談されることをお勧めします。