お互いの距離感がわかりません。

５歳年上の夫と高学年の子供が一人の３人家族です。
子供を授かってから夫から「子供が男の子なんて人生狂わされた。」「お前の退職金で車のローン返済しろ。」「今は俺の金で生活してるんだろう？」「働くならパート以外は許さない。」と心無い言葉を投げられ夫への信頼は無くなり話もしない関係が続いています。
子供が中学にあがるタイミングで正職員での仕事復帰を考えていると言ったあたりから夫の態度が変わってきて「お前が働いたらまずは俺の借金返そうな。」「お前はすごいな。」と声を掛けてくるようになりました。
子供のためには意地を張らず私も態度を緩和させるべきだろうと頭では理解していますが、過去の態度がチラついてしまいイライラしてしまい関係が余計拗れているように感じます。
話し合いをしようにも「俺が悪いって話？すみませんね。」から始まるので会話のキャッチボールにならず疲れるだけです。
どう距離を取ればいいのか悩んでいます。