お酒が入ると、約束が守れない夫について相談したいです。

夫婦共に30歳で、結婚3年目。子なしです。 夫が昨年転職し、職場の方と飲みに行くことが増えました。（週に1回、多くて2回程） 私は、職場の方が夫を飲みに誘ってくださることが嬉しいので、飲みに行くことを禁止にしていません。 ただ、「みんなで飲んで帰っていい？早めに帰るね！」と連絡はくれるのですが、私が納得行く時間で帰ってくることも無くなりましたし、なんなら帰ってこないこともあります。 私は、「帰る」と言っているのに、帰ってこない・自分で約束をしといて、守ってくれないことが腹立たしいのです。 本人もそのときは「気をつけるね、ごめん」となるのですが、また時間が経つと同じことの繰り返し。 自分で「帰る」と約束をした夫が、目の前の楽しさの欲求に負けて、約束を簡単に破ることに対して腹が立っています。 先日も、「少し飲んで帰る」「夕飯食べる」と連絡があったのにも関わらず、友人の家に泊まってそのまま仕事へ翌日行きました。 どうしてこんなに約束破れて、しかも謝りもしてこないのだろう？と理解し難いです。 昨夜夫と話し合いをしたのですが、 夫の意見としては、「帰らないことが自分でもおかしいと思ってるし、私に寂しい思いをさせてしまっているのは申し訳ないけど、ここでまた約束を守ると言っても絶対に守れないから、飲みに行くと思ったら帰ってこないと思ってくれた方が楽。」とのこと。 お互いが納得いく答えが結局出ずに、最終的に夫が「じゃあ絶対に行かないといけないもの以外は断ることにする。ごめん。」と折れてくれましたが、本心ではないだろうとモヤモヤしています。 お互いが納得いく答えはないのかもしれませんが、皆さんのアドバイス・ご意見をお聞きしたいです。