契約不適合責任について

中古物件を購入するにあたり購入前に
玄関の移設は可能か?
軽自動車は停めれるのか?
上記を質問し、売主からは知り合いの工務店は出来ると言っていると回答されました。
その回答があった為安心して契約しリフォームの見積もりをする為何社か工務店に依頼しました。
するとどの業者も、この物件はパネル工法なので玄関の移設は無理だと言われました。
それでは困るので、そこを建てた大手のハウスメーカーに問い合わせたら、玄関の移設は可能ではあるけど1ミリも狂わず基礎からやり直さないと耐震にならない。人間にそれは不可能ではないかと言われました。
移設が無理なら玄関開き戸を引き戸にできるか質問したら、出来るけど外側に20センチはみ出るので車が停めれませんと言われました。
売主の当初の説明と違ってくるので契約解除を伝えると、重説にリフォームの特約が載ってるので買主都合だと手付けの返却は無理で違約金がかかると言われました。
最悪違約金は無くても手付け解約したいです。
難しいでしょうか?

手付解除は、相手は履行に着手するとできません。その状況になっているか次第ですね。

後は契約違反・告知義務違反の程度が、詐欺取り消しとか、重要な瑕疵で解除可能なレベルに達していれば解除は検討できますが、玄関付け替えだけですと、そこに至っているかという問題はありそうです。