社長が退職を認めてくれないのですが

退職についての質問があります。
私は現在、外構の現場作業員として働いているのですがその仕事を辞めたいと考えています。

社長の方にその旨を伝えたところそんな簡単に辞めれるかと一喝され、これまでお前にいくら使ったと思っている等々言われました。

結局のところ退職の条件てして、私は以前に何度か会社の車をぶつけてしまい、その損害賠償(おそらく100万?見積もりが出しだい)を一括で払い、なおかつ私の後釜を1人見つけて来るまで辞めることは許さないということになりました。
損害賠償については私の責任でもあるのでお支払いはするつもりですが、今一括で支払える貯蓄もありませんし簡単に自分の後釜も見つかりません。
お金については分割でもいいかと交渉しましたが聞く耳を持ってもらえず、人も見つからずで、更に毎日嫌味や恨言を言われて日々ストレスを抱えています。

この場合私が辞めたいと言うのは非常識極まりないのでしょうか?
正直明日からバックれたい気持ちでいっぱいです。
社長の顔も見たくないのですが仕事を休むわけにもいきません。

どうにかして退職は難しいのでしょうか?
教えて下さい。

雇用形態については
・日当(およそ一万)
・正社員なのかアルバイトなのか不明(雇用契約書のような物をもらっていないため不明)

また退職については結構前から考えていて私を今の会社に引き入れてくれた人の顔もあって言い出せずにいました。
損害賠償については私が運転していて事故をして任意保険に入っていなかった?、かなにかの事情で社長が修理費を10割負担ということでその事でかなり言われています。
恨言を言われるのは仕方ないと思いますが、この仕事がそもそも向いていないとひしひしと感じていてそれもストレスに感じています。

車の損害については、1割程度の負担ですかね。
後任を見つける義務はないですね。
紹介者には、事情を話して、一定の理解を得ておいたほうがいいでしょう。
お金は、10万くらいは、かかりますが、退職代行弁護士に依頼したほうがい
いいでしょう。