謝りたいのに、謝れない

トピタイトルの件で相談です。
家族を自死という形で亡くして、とても辛かった時期がありました。
毎日、起きては泣いて、帰宅しては泣いて、銀行・市役所に手続きに行ったり有給も頻繁に使っていましたので、当時の仕事ぶりは散々なものでした。
そんな中、何の事情も知らない他部署の先輩から仕事について非難されて、私が悪かったにもかかわらず、突っかかったような返答をしてしまいました。本当に失礼で、幼いことをしてしまいました。
もう数年ほど経ちますが、相手も私を避けているようで会話する機会がなく、未だに謝っておりません。
二度とこのような失礼をしないように、今後は気持ちに余裕を持とうと決心し、どんな時も落ち着きを忘れずに行動・会話するよう気をつけています。

謝ったほうが、私の気持ちはすっきりします。相手としては「今更、謝られても…」となるでしょうか。
他部署なので、謝りに行くにはわざわざ違うフロアへ行って話をしなければならず、自分が悪いとはいえ、とても気が重いです。

でも人として、やはり失礼なことをしてしまったら謝るべきだと思うので、心の中でいつもごめんなさいと罪悪感に悩まされています。