新年会がしんどい

初投稿、乱文失礼します。
恒例の友人同士での新年会がしんどいです。

幼馴染たちと毎年行われる新年会に参加したくありません。
学生の頃はとても仲が良かったですが、社会人になり何年も経つとさすがに話が合わなくなってきました。
この友人たちとは新年会でのみ年1で会っています。数年前までは遊んでいましたが、ふと自分から誘ってばかりで誘われたことないな？と思い、誘うのをやめたらすっかり疎遠になりました。
snsなどで他の友人同士では遊んでいる様子があげられているので、私だけが誘われていないようです。
しかし、新年会だけは恒例で声がかかります。しんどいです。
前回参加した時は、私のよくわからない話題、参加していない遊び、旅行の話ばかりでとても肩身がせまく、悲しいような寂しいような思いをしました。

要するに好かれていなけど、声をかけないのも変だから誘っているのでしょう。
どうか私に断る勇気をみなさんください。
そして断ったとしても過去を引きずってウジウジしてしまう私に喝をお願いします。