昔パワハラをしてきた上司（今は別の部署）の家族に不幸があったらしい。香典は出したくないんだけど、出さないと周りから冷たいと思われるかな？

突然の相談失礼します。
私の職場は同じ部署や知っている社員の身内が亡くなった際、各々が少額で香典を出しているんですが、
私にパワハラしてきた上司の身内の訃報を社内の掲示板で知ってしまいました。