転職して2ヶ月

3人の子持ちの主婦です。
転職先の人間関係で悩んでいます。
転職先は上下関係が厳しくすごく気を使います。
個人病院の事務のパートで雇っていただいたのですが、事務には常に誰かの文句をいっている口の悪い50歳の方がいます。勤務中なのに「〇〇さん、おかしいんじゃない？」なんてことを笑いながら話してるのを聞いたりします。実際、私の悪口を言われているのを偶然聞いてしまったこともありました。何か指示するときも言い方がきつく、私だけに態度が違います。
私にはどうしても彼女と上手くやっていけるとは思いません。看護師さんと事務の関係も最悪でお互いにあら探しのような‥。
仕事内容は自分の希望していた職種なので満足しており、休みや勤務時間は主婦にはとてもありがたい待遇です。
次を探すにしても休日などの条件が合う所があるかとても不安です。
一番下の子を保育園に通わせている為、次をに仕事がないと焦ります。
そういったことを考えるとなかなか退職への一歩が踏み出せませんが、仕事のことを考えると憂鬱で家族と一緒にいても楽しめません。
このようなことで辞めるのはやはり甘いのですかね??