引っ越したい！

以前から引っ越ししたかったのですが、シロアリに脱衣場を食われたり、
子供の送迎時にバッグが盗難されたり、一昨日は近所の住民に車を当てられたり次から次にありました。
結婚前に住んでた公団が懐かしいです。
前住んでた所は、駅も近くショッピングも便利で景色も良かったのに、、
今は駅から五十分、住宅ばかりで何も無いです。夫のごり押しで決めてしまったのを後悔してます。
残っているローンを考えるとあと五年後位先かとおもうのですが、今住み替えをしたいです。
現在1200万ローンがあって、以前不動産屋に地域の相場で1200万と言われました。
ローンがあって住み替えをされた方の体験談がききたいです。
シロアリに食われた所は完全に業者に直してもらいました。
こういう事はどう判断されますか？