妻とのこれからの関係

相談させてください。
私20代後半、妻20代半ばです。
結婚して3年目になるのですが、妻との関係をこのまま続けてよいのかと思っています。
理由は2つ、妻との性格の不一致、自分の借金問題です。
妻は元々束縛が強いのですが、結婚してしばらくの後精神的に不安定なことが多くなってからよりその傾向が強くなりました。仕事で遅くなったり、出張に出たり、会社の飲み会(3ヶ月に1度程度)に行ったりすると露骨に不満をぶつけてきます。飲み会はともかく仕事のことであれこれと文句を言われるのはこちらとしては悲しさや怒りを感じてしまい、頻繁にケンカになってしまいます。
借金問題については、自分が休職したり妻が病気のために働けなくなったこともあり一時的に生活費が苦しくなり借金をしてしまいました。その後すぐ返せばよかったのですが、返済が膨らみかえって借金は増えてしまっている状況です。
この借金問題もあり妻を養い続けられないということ、またそうしたモラハラとも言えるような言動をとる妻とは一緒にいられないということ、以上2点から離婚の考えもちらつくようになりました。
妻への愛情がないわけではありませんが、確実に薄れていっています。果たして今の状態で結婚生活を続けていってよいのでしょうか。
ご意見よろしくお願いします。