主人の実家に呼ばれない・・・

結婚４年目、３歳になる息子がいます。 実は、結婚してから一度しか主人の実家に行った事がないのです。 ３年以上前に一度、お昼をよばれて以来、一度もお誘いはありません。 今年、息子が幼稚園にあがるまでは、大体２週に一度くらいのペースで 義母が私たちの家に来てくれていました。 （電車で１時間の距離） 「いつも来ていただいてばかりなので、たまには出向きます」と言っても 「いいの、いいの、こっちが行くから。」と言われたことも。 先日、届け物があるからとうちに来る予定だったのが、急にこちらに 外せない予定が入り「後日こちらからパパも一緒に伺います」と約束をし、主人と義母で日を決め、お昼を用意していただけることになってました。 しかし、前日に義母より電話で、「忙しくてお昼用意できないから やっぱり外食にして」と。どうしても私を家にあげることに抵抗があるとしか思えないのです。人柄はとても優しいいい方で、嫌われているとは思えないのですが。 主人いわく、私が綺麗好きでいつも家が綺麗に片付いていて、ひけめを 感じてるのでは？と言われます。なぜでしょうか？理由がわかりません。