羨ましいって言われたら

完全には避けられない関係のある知り合い（まあ、友人といってもいいでしょう）で、『羨ましい』『お宅はいいわね』を連発する人がいます。
「お宅は家が広くていいわね」「便利なところに住んでていいわね」「ご主人が家事に協力的でいいわね」．．．　などなど。確かに全部本当です。

友人は、「私に余裕がありそう」だとか、「主人の収入が多いので余裕があって羨ましい」、ともいい、「それに比べてうちは．．．」というのでなんと返していいのかわかりません。
私は、確かに生活に困ってはいません。でも、子育ての傍パートタイムで働いており、地域の活動にも参加してて、それらが立て込むことや行き詰まることもあります。
あえて人にはいいませんが、心配事や困っていること、人様から見たら決して羨ましくないこともあるのですが、あんまりぼやかないようにしているだけです。

主人の収入がいいのは、ありがたいですが、昔は夫婦そろって貧乏学生でした。
ラッキーな部分もありますが、基本的にで今持っているものは夫婦で協力してを手に入れたし、夫は今も激務なので、夫本人もそのフォローをする私もまったく楽に生きてるわけではないです。
つまりは人並みに苦労して真面目にやっているつもりです。それを、棚ぼたで優雅にやっているみたいに言われると気持ち良くありません。
恵まれているのも事実なので、言いかえしたりたりするつもりはありませんが、この友人の羨ましい攻撃には、なんと返したらいいのでしょうか。