転職後 気まずい

はじめての転職で初日以前から女の先輩に悪口を言われているらしくどうしていいかわかりません。
それもかなり周りに言っているらしく、周りの人たちが気を遣って私に「だれか苦手な人いますか？」と色んな人に聞かれます。
挙げ句の果てには転職して3日目に別の女の先輩から呼び出され、「〇〇さん（女性の先輩）があなたのこと悪口を結構言っている。そして、あなたの指導者に結構ぶつけている。あなたは大丈夫？あなたはどう思う？直接はあなたにはしてこないんだろうけど、うまくやってね。」とアドバイスを受けました。
私は、「まだ入りたてで分からないことが多いですし、できないのも事実なので頑張ります。何か至らないところがあったら教えてください。」と言いました。が、そのアドバイスくれた先輩は悪口を言ってる先輩と結構親しい見たいです。
その私の悪口を言っている先輩は前の職場の後輩でしたが、訳あってやめました。接点は1ヶ月ほど。私も何度か指導したり、注意したことがあるので私にあまり良い印象を持っていないのかもしれません。
私自身は仕事に支障がなければ、人間なので悪口を言われても仕方ないと思います。実際、仕事の経験を積むために転職したので合わない人がいればそれはそれで勉強だなと思ってましたが、私の悪口を聞かされ続ける指導者さんに申し訳がないこと、あまりも周りがあからさまに腫れ物に触るような接し方、気遣いで仕事がやり辛いです。なんだか職場の人みんなに悪口を言われている気分です。まだ入りたてなので、こんなこと考えてる暇はないとわかってはいても、不安、イライラが増して来ました。私は職場でどのように振る舞えば良いのでしょうか。
1番怖いのが周りが結託して仕事に支障が出ることです。
長い文章ですが、ここまで読んでいただきありがとうございます。周りに相談できる人がいないため、よろしければアドバイスをよろしくお願いします。