知人にクレジットカードを悪用された。取り戻すにはどうしたら?

9月頃から知人にクレジットカードを奪われて悪用されてきました。カードを返してもらえず、使用した分は払うからと言いながらも払ってもらえていません。12/9にお金の準備ができたから返しに行くと言われ待ち合わせをしましたが、現れず、そのまま音信不通です。この場合どのようにしたらいいでしょうか?カード会社には私が払うよう言われるのですが、知人には恐喝され使用されていました。ヤクザとも知り合いだとか、言い方も怖くて逆らえませんでした。それでも私が負担しなくてはいけないのでしょうか…?

客観的に見て奪われたと言えるかどうか、ですね。
警察に被害届を出せる内容かどうか。
被害届が受理されないと、あなたの負担になる可能性が高いでしょう。

被害届が受理されれば、負担しなくてもいい可能性は高くなりますか?カード会社からは一方的に請求するから払えとしか言われませんでした。

カード規約をみてください。
該当部分は少しなので見ればわかるでしょう。
被害届受理証明書を提出すれば、責任を負わず、保険会社が支払うことに
なるのが通例ですね。