ハウスメーカーの確認ミスで追加費用発生、契約解除は可能か?

ハウスメーカーと契約をし土地を購入、図面完成後着工の直前に風致地区ということが発覚し、図面の変更を求められました。
責任はどこにあるのかと聞いたところハウスメーカーと建築士の確認ミスだと言われ、道路境界線から建物の間を2メートルあけなければいけないということで建物の配置をずらしてもらえないかと提案されました。土地の形や建てる家の大きさの都合上、2メートルあけるとなると道路から駐車場にする予定の場所へのアクセスが厳しい状況(狭くて車が通りにくく危険であり駐車出来ない状態)となっており、家の形を大幅に変えるか追加でお金を払い土地を広げるかを提案されました。
こちらとしては希望の土地に希望の家が建てられないことや追加でお金を支払わなければならないかもしれない状況に酷く困惑しており、またどうするべきか悩んでおります。
着工直前なので契約書にはサイン済みなのですが、契約解除は出来ても契約解除に至るまでの請負代金額を支払って費用を清算しなければならないというような文言が書いてあり、なにを取っても損しかしないのではないかと不安に思っております。
どう行動するべきでしょうか。

契約書や勧誘に際して交付された書面(パンフレット等)を整理して、
個別にご相談なさるとよいでしょう。
請負契約とは言え、着工には至っていないようですし、
図面に関しては、どのみちそのままでは使えないことから、
相手方算定額を争うことはできるように思われます。

個別に相談してみることにします。回答ありがとうございました。