辞めたくないのに続けられなそう

先月正社員で入社した会社で人間関係がうまく行っていません。 上司に恵まれ、他部門の先輩方も親切にして下さり 頑張ろうと思っていたのですが、同じ部署のパートさんに 嫌われてしまっています。 普通に接してくれるパートさんもいますが、 部署の事務をしている気分にムラがあると周りからも言われている方と社歴が半年の方（上から目線で大半に嫌われているらしい）に嫌われているようで、 帰る際は私以外に声をかけて帰ったり 話しかけても言い方が冷たく他の人への対応とは別物です。 コソコソ悪口を言われていたのは分かっていましたが 大きい声で仕事をしてないニュアンスのことを言っているのが聞こえてしまい、会社は好きなのにこんなの毎日続くのは耐えられないと思ってしまい毎日辛いです。 転職したくないけど、せざるを得ないかもしれません。 上司は親身になって常々相談に乗ってくれていますが、お忙しく朝以外は常に不在の為状況は変わりません。 初めは優しかったので私が何かしたのだと思います。 思い返せば、私がパソコンを使った仕事がメインになってから態度が変わったようにおもいます。 一回りも二回りも年が違う正社員は受け入れられないという事でしょうか。