仕事を辞めるべきか悩んでいます・・

３０代半ば女性です。同年代の夫と２人暮らしです。
４年前に２回流産，多忙な仕事などが重なりパニック症候群になりました。
ここ２年位は症状も出ず落ち着いていましたが、先月 職場の人間関係，仕事の重圧で
パニックの症状が出ました。
通院している心療内科の先生に「もう仕事は辞めたい」と告げると焦らず結論を出さず、
とりあえずしばらく休職し自分の体を休めなさい、という事で現在休職中で少し落ち着いています。

今年初めに不妊治療のため、婦人科にもやっと通えるようになり（以前はパニックの症状が出るのが
怖く行けなかった）また子供を授かりたい！という前向きな気持ちで辛い仕事もこなしていましたが、
あの怖い発作が出てしまいました。
主人は『もう辞めていいぞ』と言ってくれたのですが、やはり金銭面の事を考えると復帰するのが良いのか
悩んでいます。正社員ということもあり、いろいろな面でメリットがあります。
しかし、すぱっと仕事を辞めてストレスがない環境で不妊治療に専念するか、復職して治療と両立させて
頑張るか悩んでいます。
皆さんのご意見（辛口大歓迎）お願いします！