夫と将来に向けた話をしたいのに

夫３５歳、私３１歳、幼稚園児の子供が２人、４人家族です。

恥ずかしながら、今まで、交際～結婚～出産まで、
特に将来のことを話し合いもせず、なんとなくの流れでここまで来てしまいました。

いい加減いい年ですし、将来に向けて、夫と話し合いがしたいのですが、
話を切り出しても「ん～、俺もいろいろ考えてはいるんだけど、また今度話そう」と、結局話し合いにならず、
また数日経って、「この前の話なんだけど…」と言うと、「またその話か、いま疲れてるんだけど」と、はぐらかされてしまいます。

具体的に話したいことはたくさんありますが、たとえば住居の話です。
今は賃貸マンション住まい、義父母との同居は有るのか、戸建を購入するのか、このまま賃貸なのか…など。

大事な話ですので、１日だけ話しただけでは決まらないだろうし、１人で決められる話でもありません。
せめて、夫婦間で考えをまとめたいだけなのです。
仕事から帰ってきてこんな話ばかりでは疲れてしまうのもわかるのですが、
そうは言っても、このまま流れに身を任せて生きていくのも不安なんです。

ちなみに、休みの前日の夜は飲みに行ってしまうので、帰ってくればデロンデロン、
休みの日は家族で出かけるので話し合いは出来ません。

やっぱり、時間をとって、話し合うしかないですよね。
みなさん、いつこのような話し合いをしているのでしょうか。

もう不安なことがたくさんありすぎて、将来が心配になってきました。