こんな職場、どう思われますか？

４０歳パート勤務です。
扶養内での勤務で、年間１３０万円におさまるようにしています。

毎月、平均的に働ければいいのですが、とにかく職場が忙しく、残業続きで、このままいけば所得が超えてしまうということで、去年は８月から３カ月まるまる休みになりました。

また、うちの職場は社会保険に入っている人がほとんどで、残業するのが当たり前の雰囲気です。
保険に入っていないとはいえ、そんな中、自分だけ先に帰るのが申し訳なくて帰りづらいです。

そのときのタイミングもありますが、代わりの人が入ってくれればまだ帰りやすいのですが、私が帰ることによって、まわりにその分負担がかかったり、最後の掃除だけおいて帰るときなどは、ほんとに気を使います。
なので、同じように残業してしまいます。

そんな中、たまに早く帰れる時に、保険に入っている人に「代わる？たまにはいいんじゃない？」と言われることがあります。
保険に入っている人でも激務だと帰りたいみたいです。
だけど、私は帰れるときに帰らないと、ほんとに限度が越えてしまうんです。
残業は保険に入っているから仕方ないことだと思うんです。
帰りたければ、社会保険に入らなければいいのにと思います。

私も将来を考えると、社会保険に入りたいのですが、今の職場での激務では自信がないので、あえて入らないのに。

最近、ほんとに居づらいです。

ただ、メリットもあり、家から５分の距離。時給がいい（１０００円です
）勤続年数が長くて慣れている。などです。
今から知らない職場でやり直すのも不安です。
また、不安障害のような病気も持っているだけに、慣れないところはこわくて。

今の職場でがんばるのがいいでしょうか。
自分で決めることなんでしょうが、皆さんの意見もお聞きしたくてトピを立てました。
よろしくお願いします。