離婚話し合い中に妊娠

旦那と離婚に向けて話し合い中なのですが、不倫相手の子供を妊娠しました。
旦那との間には子供が4人おります。
今後は、不倫相手と一緒になりたいと思っておりますが、旦那との間の子供の親権は取ることは難しいのでしょうか?
旦那との離婚理由は
私への暴言、セックスレスなど。。
我慢の限界となり、私から離婚を切り出しました。
セックスレスで、相手にしてくれないのであれば、外でしてきてもよいですか?とも話しました。
いいよと言われ…もう私たち夫婦の関係は終わってるんだな。。と思いました。。
一度は離婚に納得し、離婚届にサインを書いたのに、不受理届を出しており、離婚届を提出できない状況です。
子供のことも一切無関心で、家事、育児は私と私の母にサポートしてもらい、今まで行ってきました。
親権もいらない。と言っていたのに、やっぱり…と、親権を取るつもりみたいです。
不貞行為はもちろん悪いことだとわかっています、私の責任です。
ですが、子供たちの親権は譲りたくありません。。
よろしくお願いいたします。

今お腹にいる子を産む場合、旦那にはいずれ知られることですが、離婚が成立したあとに話しても、良いのでしょうか?それとも今現時点で話すべきでしょうか?

不貞をしているから親権が認めれらないということではありません。実務では、お子様への愛情、これまでの監護状況、経済力、お子様の年齢、意思、兄弟が離れ離れにならないかなどが重視されます。配偶者との間で親権が争いになるのであれば、一度弁護士に相談されることをお勧めします。

追記についてですが、話すタイミングに法律上決まりはなく、いつがいいと言うことは一概に言えません。ただお腹の中のお子様は法律上は今の旦那様との間の子供と推定されますので、後々トラブルにならないようご留意ください。ご不安であれば弁護士にもご相談ください。
ご参考になれば幸いです。