相手の不倫、相手が離婚調停希望について

先月に婚姻届を提出し、受理されました。
養子縁組の届けも受理されました。
そして現在二人目を妊娠中です。
夫は不貞行為があります。離婚に向けて裁判をすると言われました。
こちらは離婚する気はありませんが、夫と連絡が取れない時、数十回の電話をしてしまったり、夫の契約する賃貸の解約に伴い、不動産から荷物を出すように言われ合鍵を貰い、夫の部屋に入り、その際夫とは話し合いました。
こんな事がありますが、離婚は成立されてしまうものなんでしょうか。

私は結婚して育てるその音声録音、スクリーンショットは所持しています。
二人でやっていけない限り私は子供を育てる自信がなく、子供二人連れてって。とも話している段階です。
でも上の子は確実に私が血の繋がっている為、私といたい。そう言うと思いますが
私は幼い兄弟を引き離したくはありません。

かといって養育費などで解決できるとは思っていません。支払い能力が夫にはないからです。そして差し押さえる物も現状ないからです。

離婚成立はどのような場合なんでしょうか

こんな事がありますが、離婚は成立されてしまうものなんでしょうか。
→あなたが離婚を拒否する限り、夫が離婚するための手続きとしては離婚調停を経て離婚裁判で裁判所に離婚を認めてもらう必要があります。もっとも離婚裁判では不貞をした有責配偶者からの離婚請求は原則として認めませんので、不貞について相手が認めていたり、不貞の証拠があるのでしたら原則として離婚は認められないでしょう。

不貞の証拠と言いますか、私と出会う前から借りていた旦那名義の賃貸、そちらにその女性と現状同棲しています。
女性の荷物の写真は所持しています。