どう思われますか？

主人の実家は、詳細は言えませんが、跡取りが必要な家業をしています。私は後をとらない次男と結婚しました。新婚当初は、まだ跡取りが結婚しておらず（男三兄弟のうち三男が後を継ぎます）、助けにいける範囲で実家を手伝っていました。しかし何年か前から、跡取りの三男が結婚をし、私の主人の仕事も数年前から激務になったせいもあり、昨年は、手伝いに行きませんでした。すると今年の年賀状で、主人の叔父や、義父の友人からなぜ手伝いにこないなどの葉書が届き正直傷ついております。義両親に、主人からその話をし、こちらも忙しくなり、手伝いもやめようと思うということを話ましたが、叔父を悪くいうな、帰省したくなければしなくていい、自分たちだけ忙しいと思うな、など激しく言われ傷つきました。結婚して10数年、いつも義母からあなた達は跡取りではないから、という理由で屈辱的な言動を体験しました。それでも、お手伝いできる範囲でさせていただきました。正直もう嫌気がしています。親孝行をしろ、ということらしいですが、主人の実家に帰省しない年は私の実家にも帰省していません。私たちの行動は何か間違っているとこらがあるのでしょうか？ ご助言よろしくお願いします。