損害賠償請求について

自分の配信中、言い争いになり「前から周りのいろんな人と揉めたりするの見かけててやばい人だとは思ってた」と発言したところ誹謗中傷、名誉棄損だと言われてしまいました。

配信終了後相手から何件か連絡がきておりましたが、今後関わりたくないと思い返事をせず繋がりのあるアカウントを全てブロックし関係を断ちました。

その後別のアカウントから場合によっては、損害賠償等発生すると連絡がきましたが、こういった発言で損害賠償が請求されるのでしょうか?

こういった相手にはどういった対応をするのがベストなのでしょうか?

こういう話は99%以上ハッタリなのですが、ごくわずか、訴訟費用に糸目を付けず、まず勝てない見込みでも訴えてくる人もいます。
本件でも、(発言全体を確認しないとはっきりとは分かりませんが)個人の論評の範囲内の発言と思われるので、負ける可能性は相当低いかと思います。
無視するか、できるものなら訴えてこいと相手にするか、配信者ご自身の評判がどうなるかも踏まえてのご判断になるかと思います。