敷地内同居の孤独感・・・

こんばんは。初めて投稿させていただきます。

現在、主人の実家のすぐ隣に離れを建て、主人と子供と3人で住んでいます。
母屋には義両親、主人の弟が住んでおります。

主人には嫁いだ妹もおり、うちの息子と同学年の女の子が居ます。
義妹は頻繁に子供を連れて帰ってきます。そして母屋に子供を預けて出かけたり、義母と仲良く2人でランチに出かけたり、買い物に出かけます。(私には声をかけませんが、窓から見えますし、庭での会話のやり取りでわかります。)

私も実家に息子を連れてしょっちゅう帰りたいのは山々です。しかし、実家には弟のお嫁さんが同居しているため、なるべくたよらないよう、お嫁さんの負担にならないよう配慮しているつもりです。

私自身、干渉されるのは好きではないですし、私も母と結婚前は二人ででかけたり、もちろん現在も電話、メールも頻繁にやりとても仲良しですので、義妹の行動が分からないわけではありません。
ただ、母屋とは別に住んでいるとはいえ、やはり、嫁は他人なのだな、と実感することが多いです。

主人は出張が多く、1～2ヶ月家を空けることもしばしば。
そんな時、母屋から義妹ファミリーの楽しそうな声が聞こえると、なんとも疎外感、孤独感を感じます。
先日も、主人が出張中、私達夫婦抜きで、旅行に行ってきたようです。

義両親は我が家に干渉しないように(あえて？！)しているようで、母屋で食事することはほとんどありません。
ですのでありがたいとは思うのですが、なんだかもやもやします。

敷地内で一緒にすごされている方、義家族とはどのような距離感でお付き合いされてみえますか？また、こういった気持ちになった際、どのように気持ちを切り替えたらよいのでしょう・・・
同じ敷地内に住んでいる以上、気になって仕方がありません。
アドバイスよろしくお願い致します。