会話の無い夫婦

２０代後半の主婦です。 主人は５歳年上。11カ月の娘が一人です。 結婚４年目ですが、主人とうまく会話ができません。 もともと口数の少ない主人でしたが、結婚してさらに少なくなってしまいました。あいさつも気分次第で、機嫌が悪いと無口になります。 会話が一方通行なことに日々不満を感じてしまいます。 話しかけても「あー。うん。まかせる。」こんな感じです。 大事は話も「あとでー。」「そうだっけ？」みたいな、なんだかなーという会話です。 一つのことに集中してしまうのか、テレビがついていると「今は話しかけないで」と言われてしまいます。（テレビの内容はたいていバラエティー） 私は兄弟も多く、にぎやかな家庭に育ったのでとても寂しい気持ちです。 主人も兄弟は多いのですが、彼の実家でも口数は少ないです。一言も話さなかったこともあります。 いろいろはっきり言わない主人にイライラもしてしまいます。 以前「もっといろいろ話そうよ。」と言ってみたのですが、「ちゃんと返事してるし。無視してないし。」で終わってしまいました。 疑問系を増やそうと思い、「晩御飯何が良い？」「明日は公園で何しようか？」の問いかけに「カレー」「まかせる」でした。会話って難しい…。 同じような境遇の方、良い方法を教えてください。 ちなみに主人の趣味は読書で、週末は部屋にこもって読書の時間が多いです。