この先、どうしたら良いのか…

職場の同僚が、一気に「辞める」と言い出して困っています…
10名弱の職場なのですが、このままだと半数以下になりそうです。朝早く体力が必要で、キツい仕事です。「体力がもたない」「上司についていけない」などの理由です。私はこの仕事が好きなので今のところは続けるつもりでいますが、これだけ人数が減ってしまったら、残った人では無理だと思います。上司は引き留めない方針で、また、予算の都合（？）で採用もできないそうです。人が辞めるから私も…というのは嫌ですが、先行きが不安で仕方ありません…。辞める人達は、新しく決まった職場の話や、「りんさんも辞めたらいいのにー」と言ってきます。長年、この職場で働いてきたのに、年も年なのに、これからますます大変になるのでしょうか。この先、どう動くのが正解なのかわかりません。