人材派遣に限らず、新しい職場に慣れるにはかなり時間がかかるのではないでしょうか？
私も派遣で働いていますが、慣れるまでに半年は掛かりました
派遣で働く前は正社員で働いていましたが、店舗営業だったため転勤が多く、新しい店舗に行くたびに毎回慣れるまで苦労しました

派遣って、一度仕事を契約途中で断ると次が紹介してもらいにくくなるみたいです（実績ができないから）
なので、出来れば頑張った方がいい気がしますけど。。
まだ数日ですから、最低でも１ヶ月、または３ヶ月くらいは頑張ってみることをオススメします　ただ、我慢できない事情があれば別ですが・・・その辺りはなにかあるのでしょうか？？

辞めたいと思ったら、すぐに辞めることが出来て、
転職も簡単な点が派遣のメリットと思います。
そして仕事を選べます。
正社員であれば、そんなことをしたら職歴に瑕疵がツきます。
派遣はある意味恵まれていると思います。
どうしても我慢ができないのならば、次回の更新は断って別な職場を紹介してもらえばいいと思います。
但し年齢が上がるとともに、再就職は難しくなり、次が見つかるまでの期間が長くなるか、もしくは全く見つからないかとなると思います。
なので、派遣会社は、１社だけではなくて、２社以上登録しておいた方がいいと思います。
派遣会社自体も気に食わなかったら派遣会社も替わることも簡単にできます。

現在派遣３社目ですが、最初に派遣で働き始めてからちょうど１年が過ぎました。

最初の１社目は、会社に入ってから雇用等の契約が違っていたので１ヶ月で終了。

２社目は、都心（しかも大手町勤務！）で通勤がＮＧだったのに加えて、職場もムチャクチャ合わなくて。
銀行でしたが、あの派遣に対する見下し方にはびっくりでした。
そこは２ヶ月で終了。
（もちろん、そこの派遣会社からのお仕事はそれ以来一切ありません。）
今のトピ主さんの心境に近かったのかもしれません。

現在３社目。
職場は微妙に合わなかったのですが、自宅から３０分でいけるというという事で、だましだまし現在の派遣先は９月末で６ヶ月目。

３社目と２社目と違う点は、我慢できない要素よりも、我慢できる要素の方がちょっと多かったという理由です。

ここで提案なのですが、我慢できることと、我慢できない事をあげてみて、どうしても譲れないことがあった場合は初回更新で辞める。
でも、もう１回ぐらい更新できるかな？という感じになったら。取り合えず１回は更新してもいいのでは？
と思います。