敷地内同居したくない

もう後戻りできないでしょうか。 旦那32歳 私30歳 子供2歳 マイホームを建てるにあたって、住む土地で揉めています。 旦那は今住んでいるところから車で1時間程の旦那の実家の土地に家を建てたいようです。母屋のすぐ隣です。 小さい頃から地元に帰ってくるように言われていたのもあり、帰りたいようです。 職場は今住んでいる市内です。 私は今の市に土地を買って家を建てたいです。性格的に気を遣いすぎるので、近すぎる距離感は苦手だし、ストレスになりそうなのと、 旦那が職場に行くのにはかなりの山道を通るので、凍ったり雪で危ない中通うのを待ってるのが嫌です。今でも仕事終わるの10時とかなのに、さらに遅くなるなんて、、、 ですが、色々話し合った結果私が諦めて敷地内同居することに夫婦間で決まって、旦那両親に話しに行ったら、 別にこっちに家を建てるのは良いけど、職場が遠いのにこっちに建てる意味が分からないと言った感じでした。 義父も毎日あの道を通うのは危ないと。 小さい頃から帰ってくるように言われてたので私達夫婦は拍子抜けです。職場とか関係なく帰ってくるのが当然と言われると 思っていたので。 1度は旦那の意見を通しましたが、私はまた揺れてきてしまいました。 でももう旦那実家の土地でハウスメーカーと契約をしてしまって、今週土地調査に入るところです。 もう後戻り出来ないでしょうか。 突き進むしかないのでしょうか、、、