我慢するべき？

小学校5年生と1年生の2児の母です。 43歳です。 我が家は、並び5軒、向かいに3軒+アパートで、行き止まりになっている狭小住宅です。また、電車が近くに走っているので騒音がすごいです。 うちの、子どもがまだ生まれたばかりの頃、並びの2家族の毎日の道路族にも悩まされていました。産後鬱になってしまい、騒音や家族が増えたので狭いのもあり、夫に引っ越しを訴えましたが、夫は住宅ローンを借り換えは嫌だと受け入れてもらえませんでした。 2家族の子も大きくなりましたが、3家族が引っ越されてまた違う方が入ってきたのですが、また道路族に悩まされてます。 子供も2人授かることができ、4人で暮らすには手狭です。 上の子の中学を機に、引っ越しを希望してますがおそらく夫は縦に頭をふることはないと思います。 子どもが巣立つまで離婚は待つべきか、離婚するべきか、アドバイスお願いいたします。