雇用契約書提出後の辞退

つい先日有期の雇用契約書をとある会社と交わしました。
交わした書類は入社承諾書、入社時誓約書、雇用契約書です。
4/5からの入社を誓約し、初期雇用期間は4/20からとなっています。
入社時に渡された資料を見て、実際にこの会社で働いていける自信がなくなり辞退を考えています。
この場合、なにか損害賠償などの請求はされ?のでしょうか?

ちなみに辞退の旨伝えたところ、既に入社までに時間と人件費を使っていて契約も交わしているので辞退は受け付けられませんと言われています。
これは正当な主張なのでしょうか?
また、辞退するにはどのようにしたらよいでしょうか?

損害の請求はないので、明日にでも、入社辞退する旨、
お詫びとともに伝えた方がいいですね。
あたりまえですが、早い方がいいので。

損害賠償請求されるということはないでしょう。されたとしても通らない主張です。
ですが,相手のためにも少しでも早く辞退する旨を伝えた方が良いでしょう。
就職活動,頑張ってください。