成人年齢引き下げがあると聞きましたが未成年と成人の性行為はどうなりますか?

今付き合っている男性が居ます。その人は成人しており私は未成年です。
その男性からは私が成人になったら性行為などをしようと言われており、私もそれに同意してます。そして前に法律によって成人年齢の引き下げがある事を知りました。
サイトを見ていくと様々な事が出来るようになりますが、飲酒や喫煙は20歳から、らしくよく分からなかったです。
そこでなのですが、18歳から成人と世間から認識があるならその付き合ってる男性との性行為は合法なのでしょうか?それとも性的なものは20歳からじゃないと付き合ってる男性側に罪は問われるよでしょうか?
またその男性の家に18歳になって泊まりに行くのは合法ですか?
調べましたが、よく分かりませんでした。
よろしくお願いします

修正

(前)性的なものは20歳からじゃないと付き合ってる男性側に罪は問われるよでしょうか

(後)性的なものは成人と認められている18歳でも、付き合ってる男性との性行為は20歳からじゃないと男性側に罪が問われるのでしょうか?

分かりにくかったので追記しました。

18歳になれば、性行為をしても罰せられることはないですが、
妊娠、中絶など後で嫌な思いをしないように、注意して交際し
てください。