住宅請負契約における解約金の減額可能性についての相談

2024年2月、注文住宅の請負契約をしました。ハウスメーカーで建てる、条件付きの土地も合わせて契約しています。
支払いしていけると思っていましたが、蓄えができない不安から、自己都合で解約させてとらおうか迷っています。
逸失利益10%は契約書に書かれていたと思います、約220万。契約書作成費用11万、図面作成費用22万、人件費その他諸経費33万、印紙代3万、土地手付金100万(支払済)で、400万近くの解約金がかかるとのことでした。
FPの方から『シングルマザー年収480万(手当含む)でこの額を勧めるなんておかしい、減額できるのでは』と言われていますが、関係あるでしょうか?
減額の可能性はあるでしょうか?
県外でも建物の契約に詳しい弁護士さんにお願いした方がいいのか、専門ではなくても近くの弁護士さんに相談すると良いのか、も悩んでいます。

まず一度契約書等を確認してもらってください。

ローン審査は住んでいる状況でしょうか?
自己都合解約の場合の金額は、ご自身がその旨を相手方に伝えて得た回答ということでしょうか?

ご回答ありがとうございます。

ローンは仮審査が通っており、本申込の銀行を選ぶ段階でした。
営業の方に、解約も検討したいと伝えました。会社に確認するとのことで、後日、表にしたものを受け取り、簡単な説明も受けました。