子供二人目の意見が合わず、家庭内別居状態

私は34歳で、子供は一人、小1です。

夫は二人目がほしいというのですが、私は乗り気ではなく、
「もう子供を作りたいとは思わない」
と言ったところ、夫が怒って喋らなくなり、私を避けるようになりました。
今は一緒に居ると空気が重苦しく息が詰まる状態です。

子供はかわいいし、育児もあまり苦に思ったことはありません。
作りたくない理由は、過去の夫の態度です。

例
子供の言葉が出るのが遅い、オムツがなかなか取れない→「お前の育て方が悪い」
2歳ぐらいの頃、子供がスーパーで走ると、やはり「お前のしつけがなってない」
などなど、子供がなにかをやらかすごとに私が悉く罵られ、我慢できずに離婚寸前までいきました。一応離婚は回避しましたが。

今はもう子供も成長し、罵られることはありませんが、どうしてもまたこの夫と子供を一から育てたいと思えないのです・・・。私の精神が参ってしまいます。
夫に対してはかろうじて情が残っている状態です。


一方、夫はきちんと家族の為に働いてくれています。外で一生懸命働いて家に帰ったらこれまた重苦しい空気で、家で安らげないのはとても可哀想です。


どうすれば、いい方向に向かうと思いますか？もう無理でしょうか？
どのようなご意見でもいただけたら幸いです。