三十路前男性　考え方は変わりますか？

結婚を考えている彼(29歳)がひがみっぽくて困っています。

彼の実家はご両親と妹さん４人家族で
あまり裕福でない生活を送ってきたようです。

そのため、私が子供のころ家族で休日遊びに行った話
や旅行(国内のみ)をすると
「俺の実家周辺ではそんな無駄遣いする人はいなかった！！」
と不機嫌になります。

ここまで読んでくださった方は、
『裕福でない家庭で育った彼』と『平凡な家庭に育った彼女』
というイメージが浮かぶかもしれませんが
私もどちらかというと裕福でない家庭に育っています。

私の実家は、私が10代の頃に両親が離婚しました。
離婚後は生活が一変して、金銭的にも精神的にも苦労しました。
周りの友人は裕福な子が多いので、友人と自分を比較すると
つらくなるので、そこは『自分は自分～♪』と割り切って生きてきました。

このように、そこそこ苦労してきた私をひがむ彼の気持ちが理解できません。
私の家族話の話し方は決して、自慢っぽくもなく頻度も三ヶ月に一度
位です。

生まれる家や家族は選べるものではありませんので、結婚する上で
実家が裕福であるかないかは重視しませんが、ひがみっぽい考え方が
これからも変わる見込みがないと、人生を共にするには少し厳しい
ように感じるのですが、みなさんどのように思われますか？

もし、よろしければアドバイスお願いいたします。