職場の二次会について

職員数１２人の職場に勤務している２７歳独身女性です。先日役員と職員合同の新年会がありました。新年会は２時間程で終わり、役員の方はバスで送迎し、その後急遽職員のみの二次会が設けられることになりました。家族の都合で帰る人が２人（いずれもアラサー）、私はその後予定はありませんでしたが新年会の終了時刻を事前に知らされており、母にその時間に迎えを頼んでいたこと、また二次会の話を聞いた時点で母にメールで「もう少しかかりそうなのでまだ迎えはいいです」と送りましたが、「もう出てしまったので待っています」と返信がきたこともあり二次会は欠席することにしました。後輩の女の子一人も私と同様都合は悪くないようでしたが二次会は欠席で一緒に帰りました。
そして今朝出勤すると先輩の一人（飲み会好き、いつも飲み会の発起人）に私とその子が呼ばれ、「お願いがあるんだけれど、この間のような時は都合が悪くなければ出来るだけ二次会に出席してほしい。じゃないと二次会に若い人がいないし、ああいう場でしか話せないようなこともあるんだから」と言われました。
でも私はこの意見にどうしても納得がいかないというか腑に落ちません。
確かに先輩の言うとおり飲み会での上司や先輩方とのお付き合いも大事だとは思います。でも二次会はあくまでも強制参加ではないし個人の自由だと思うのですが・・・。
うちの職場の飲み会は２ヵ月に１回ぐらいの割合であります。そして私はもともとお酒がほとんど飲めない、弱い体質ですが以前上司に「もう少し飲めるようにならないとダメだ」と言われたこともあり、飲み会では頑張って飲むようにしてきました。でも今回の先輩の忠告でなんだか今後職場の飲み会の二次会は絶対参加と言われたような感じがして飲み会に対してとても憂鬱な気持ちになりました。
みなさんはこの先輩の意見どのように思いますか？ご意見をお聞かせ願えれば幸いです。