派遣で働いてます

工場で働いて約二年です 色々な部署があるのですが、私は派遣なので毎日色々な部署で手伝いの仕事です。 以前に○部署で働いて欲しいと言われたのですが、仕事がとてもきついのと覚えるのが大変で辞めると言ったのですが、人数が減ると困るので、元の部署に戻って働いて下さいと言われました。 それから、派遣先の上司に私は△部署で働きたいと希望していて、△部署の人が 一人辞めるので、その後釜に入って欲しいと言われました。 今△部署で働いてるのですが、仕事がきついのと、人間関係のゴタゴタが凄くて大変です。 派遣先の上司に 私の希望の△部署に移動させてもらったのは凄くありがたく感謝なのですが、仕事もきつく人間関係のゴタゴタがあって大変です。 私の希望で△部署に移動してもらったのに、やっぱり嫌ですとは言えないですよね。 皆さんどう思いますか？ アドバイスお願いします。