夫との別居についてアドバイス頂けますでしょうか

以前から、夫は仕事が忙しくなると、無口で高圧的なところがありました。
そして、半年に１度くらいの頻度で、ストレスでイライラしてくるようで、ちょっとした事がきっかけで、文句を言い始め、ドアを大きな音をたてて閉めたりします、物を床に叩きつけたりです。
物は1つくらいですが。私に当ててきたとかはないです。

ただ、大声で暴言を言うので、そういうのを注意したり、物に当たったりはいけないとか言ったりするだけで、俺は仕事が忙しいからと盾にします…。

最近また無口でイライラしているのですが、以前よりエスカレートしていて、私が話しかけても返答しなくなり、無視します。
そして、喧嘩のような事になり旦那が出て行って、私がメールをして次の日に帰ってきました。
暴言や物に当たったりもあり怖くて、悲しかったです。
今までに夫は、暴言や物に当たった後も私に謝る事がありません。
後日、悲しかったとか怖かったと言っても、悪いとは思うけど、俺は仕事が忙しいんだと何かよくわからない言い訳を言って謝りません。

その最近家出した時に、夫は多分腹いせだと思いますが、その日に20万円を借金しました。
返せない金額ではありません。でも、1度に平均月給くらいの大金を借金して、なおかつ、結婚する時に夫は借金があるのが発覚し、私と今後は無断で借金はしないと約束しました。既に返済は済んでいます。
それで今回このような事があり、私も糸が切れたような感じになりました。
今回結婚するときにした約束を破り、腹いせのように借金したのでその行動がショックでもありますが、怖いです。
夫もこんな行動を取るのですがら、離婚したいという事でそれなら良いのですが、考え過ぎなのかもしれませんが、うちの実家は母と私の女姉妹で住んでいます。
嫌がらせとかと思うと…、本当は実家に別居を躊躇してます。
これは考え過ぎでしょうか？