派遣社員の中途解約について

まだ勤めて２週間ほどなのですが、仕事内容と職場が自分に合わず、中途解約を考えています。分かってはいたことですが、交通費が出ないのも痛いです…。 せめて最初の契約の１ヶ月は勤め上げようと思いましたが、引き継ぎの方が今月の27日でお辞めになり、自分が後任として雇われたため、せっかく引き継いだのに…ということになりそうです。 本当に自分勝手なことは承知の上ですが、それならば早いうちに決断して、新しい人に来てもらった方がいいのではないかと思います。 ただ、もう次の仕事が紹介されないことは覚悟の上ですが、私が早期に辞めることにより、やはり派遣会社に対しての信頼が失われてしまいますよね…。それもありどうしようか迷っています。 派遣会社の担当の方に相談するにも、本音を言ったら絶対に引きとめられてしまうと思います。 ご意見をいただけますと幸いです。