不倫かセクハラか、慰謝料請求出来るか教えて下さい

主人が職場の独身女性宅で数回、深夜も含み密会している事が分かり、相手女性へ確認しました。双方、肉体関係はおろか交際もないとの説明を受けました。
誤解を招いた行動や私を傷つけるつもりは無いので、業務外で関わらないと口約束ですがメールを頂きました。
数ヶ月後、また同じ女性と会っている事や双方が好意を持ち交際している証拠も出てきました。約束と違う事や2年に渡り好意、交際している男女が密室での密会もあれば、不貞行為は無いというのはおかしな話だと思っております。不貞行為があったと推認で慰謝料請求するには難しいでしょうか。
又、再度発覚した事により、女性側は不倫ではなくセクハラ被害だと逆に主人を訴える主張をしてるようです。相手女性も主人に対して好意や恋だとしっかりやりとりが残っている事や自身の自宅に入れ、密室で二人きりになる状況を2年間も作っていながら、セクハラ主張もおかしな話だと思っておりますが、セクハラ主張されたらセクハラになる可能性はありますか。
私としては、セクハラ主張するなら何をされ何がセクハラなのかを把握して、逆に持ってる証拠と矛盾や虚偽がある為、慰謝料請求したい所ですが、難しいでしょうか。
宜しくお願い致します。

まず、慰謝料請求するにも、相手方反論を排斥するためにも、証拠の収集精査が重要です。

ご相談概要内に、「証拠もでてきた」とありますが、具体的にどのような証拠があるのか、仮に、裁判になった場合にどこまでの価値があるのかといったことを検討する必要があります。その後、請求という段取りになります。

匿名A弁護士、お忙しい中ご回答ありがとうございます。弁護士に現在ある証拠を確認してもらう方向で検討します。