転職を迷っています

現在、時短の非常勤で働いている子持ち(幼稚園児)の主婦です。 時短パートにもかかわらず残業が多すぎるため退職しようとしていました(子供の保育園送迎に支障が出たので)が資格職のため引き止められ、結局比較的残業が少ないとされる部署に先月から異動し働いていました。 退職しないで済むならと異動を承諾しましたが、未経験の慣れない仕事内容に変わったこと、人間関係や環境の変化に強いストレスを感じており鬱々としながら働いています。 転職は容易な職で元々退職も考えていましたし、非常勤で身軽ではあるのでこの機に違うところに転職することも考えました。 しかし、家庭事情を考えて残業が少ないところへ異動させてもらってすぐに退職というのも申し訳ないため言い出しにくく…自己都合で辞めてしまえばもう関係ないのかもしれませんが… 悩んでいますが、なかなか周りに相談できる方がおらず困っていました。皆様にアドバイス頂けると嬉しいです。