離婚を考えている夫の不倫と脅迫行為への対処法は?

2月半ばに主人に離婚を考えてると言われました。それから別居をしています。理由は私がお金の管理ができないと、部屋の掃除ができないからでした。今年に入ってから女がいる感じがずっとしていて、ちょっと噂も聞いたりして、結局同じ会社に勤めている女の子と付き合ってるようで、最近わかったんですが、アパートを借りて一緒に住んでるようです。相手の女の子は長女の同級生でした。早く離婚届けをかけと家にきて脅してきます。出さないなら今すぐ家から出て行け、車も返せと言ったり、包丁をだしてきてタイヤをパンクさせる。明日から仕事もいけないし、玄関のドアも壊すと言ったりして、さすがに怖くて長女にLINEをしたら長女が警察に通報してくれて。
でも、そのときに10日の週までに公証役場を予約しないと離婚届は、だす。と一筆かかされました。不受理届は出してあるんですが、また、うちにくるんじゃないかと思うと不安です。
とりあえず、離婚はするつもりですが、不倫がゆるせません。どう動けばよいでしょう。

弁護士を立てた上で不貞慰謝料の請求を行う必要があるかと思われます。

また、不貞行為と相手の脅迫行為の証拠があるのであれば、相手の有責配偶者性を指摘した上で、離婚に応じる条件として一定の金銭の支払いを求めるということも考えられるかと思われます。