夫の実家の借金で悩んでいます

私は３０代半ばで夫は３０代後半、結婚５年目になります。
共働きで子供はいません。

夫の両親は自営業をしており、店舗兼住宅を建てた際の１億円近い借金を抱えています。
夫は結婚前から実家の借金返済のために両親にお金を渡していたようで、
１５年以上サラリーマンをしているにもかかわらず、貯金はほぼゼロです。
おそらく夫が渡したお金は１０００万近くにはあるのではと思います。

ここ数年はますます返済に苦しんでいるようで、
５年間で夫婦共有の貯金から累計５００万円は貸し（「いつか返すから」という大義名分のもとに）、ついには私個人のお金も貸すことになりました。（先日１００万円貸しました）

ちなみに、一銭も返ってきていません。
店舗兼住宅を売り払って返済するという気は今の所全くないようです。
夫の両親とは、遠距離だということもありますが、
どういう顔をして会えばいいのか分からず、１年以上会っていません。

これまではずっと、いつか良くなる、いつか返ってくるのだと信じ、
また、共働きで私自身もそれなりに稼ぎはあることや、
夫自身の借金ではないため、耐えてきました。

でも、私も３０代半ばになり、子供を生んで家も欲しいと思うようになり、
今後もお金を渡し続けるのかと思うと、不安からイライラし、
つい夫を責めるようなことを言ってしまうことが多くなってきました。
離婚も考え始め、さすがに限界なのかなと感じています。

夫は、やはり実家を見捨てることはできないようで、
「そんなに負担に感じているなら離婚してもいい。おまえに任せる。」と言っています。

ただ、私の夫への愛情はまだ残っています。
私は離婚すれば解放されても、夫は一生解放されないのかと思うと、心が痛みます。

皆さんがこんな状況ならどうされますか。アドバイスをお願いします。