上司の個人情報漏洩について

会社の上司にあたる人が、銀行などに個人の資産状況などを世間話として漏らしています。
(例資産家である、土地持ちであるなど)

あくまで世間話の体として話題にしており、そういった話を部外者にされることは不快だと伝えても取り合って貰えず謝罪もありません。
むしろ、こちらの口答えとして明らかに不機嫌となり、その後の職務にも影響が出ることがあります。

こういった漏洩は、ただの世間話だからと我慢したほうがいいのでしょうか。

上司の知る経緯としましては、相続手続きに伴う、養子縁組で名字が変わった事の説明が元です。
書類を提出したかは覚えていませんが、口頭にて事情説明をし、その際に簡単にですが口頭で口外しないでほしい旨は伝えたような気がします。(曖昧で失礼します)

ご自身に関する情報に関して、
上司が知るに至った経緯がまずポイントです。

入社時に提出した書類などを基にしているのであれば、会社側に責任が生じ得ますの
で、会社経由で当該上司に対して何らかの対処を求めるということが考えられます。

ご自身が話をしたということになると、上記とは事情が異なってしまいますが、
とはいえ、ご自身の職場環境・執務環境に悪影響がでているということであれば、
会社側に相談をして解決を検討することになるでしょう。