まず、会いたいと言ってくる人がどんな人なのか？そして、その人に会わないと何かあるのか？を旦那に相談して
特に問題無いなら断ります

親戚でも、義母の兄弟姉妹なら、前向きに検討しても旦那に相談

それ以外でも相談して、、きっとお断り(笑)

幼稚園や保育園に行かすなら、その練習も兼ねてお友達に会う約束してますからー
とか一応○日は大丈夫ですが、体調等ありますので必ずとはお約束できませんのでー
とか言って返事して3日前ぐらいに
お断りの連絡をまたします(笑)

近距離だから、感覚がマヒしてるんでしょうねー義母さん

全部ご主人を通してお断りすれば良いのでは？

義実家近居なので、義母が元気だった頃は友達とのランチ会やらによっく呼ばれて、赤子を抱えてよく参加しましたよ。義母とは仲が良かったんで、親孝行の一つだと思えば全然苦にならなかったです。
お店だったり義母宅だったり、場所はいろいろでした。疲れてたり寒くて外に出たくないと思う時は断りましたし。
義母と友達一人だけのこともあればグループの時もありました。
義母と美味しいご飯を食べるのはとても楽しかったです。呼ばれる日は自分で昼食の支度をする必要がなかったですから嬉しかったです。
食事じゃない日もあったけど、別にそれはそれでよかったし。

義母以外のジジババ世代のお友達の皆さん、それはそれは子供たちに会うのを楽しみにしてくださいました。
なかなか孫に会えない方や娘さんやお嫁さんが不妊で子供がいない、子供とも遠距離だからなかなか会えない方は私に会うのも楽しみにしてくださっていました。
毎回お決まりの孫自慢や、子供自慢、いろんな薀蓄や昔話など聞くのは苦じゃなかったですね。子供がぐずれば「そろそろ帰りますねー」。

困ったことは、お古の子供服を持ってきてくれたり、野菜を持ってきてくれたりするとき、荷物が多くなってしまいどうやって帰ればいいんだって悩んだことが数回ありました。(義母が手伝ってくれました)
でも皆さん善意でやってくださるのが分かるので、有り難く頂きました。


気を使って疲れるから行くのが憂鬱、他人の子に会いたいというのが理解できない。これしきのことで悩む人がいるんだなって、読んでて悲しくなりました。
ご自分のお母様や祖父母との交流があまりなかったのでしょうか。

自分が楽しめないなら行かないです。
精神的、体力的に余裕があって楽しめそうな時は参加させて頂くかもしれません。　　
無理して行って疲れちゃうなら無理しません。
気を使って、疲れて、憂鬱になると言う事は、その様な集まりがしんどいと言う事ですよね。
旦那様がお休みの日に旦那様とお子様だけで参加してもらうのはいかがですか。
それか、旦那様がお休みの日に3人で挨拶だけして「じゃ、これから別の予定あるんでー」とすぐに立ち去る。近距離でいつも会っているなら短時間でもいいですよね。
義母さんは可愛い孫を皆に見せびらかしたいんですね。
トピ主さんは、トピ主さんの生活スタイルで生活すればいいと思います。
義母さんの言う事に振り回されなくていいんです。
「その様な集まりは（今は）しんどいので私は遠慮させて頂きますー」てな事を上手く旦那様が伝えてくれるといいですね！
旦那様の腕の見せ所ですね！

素朴な疑問なのですが、孫だけ連れていってもらうのって駄目なんですか？
トピ主さんが嫌なのかな、、？

そんなに距離が近いならご飯あげたりオムツ変えたり出来るでしょうし、面倒見れるんじゃない？とか思ってしまったんですが、それは育児放棄的な扱いになるんですかね？

何歳からだったら子供だけ連れて行っても平気なんでしょうか。
質問返しみたいになっちゃったんですが、嫌なら子供だけ預けては、と思いました。

ちなみに私なら、一度は付き合うかな。
それでしんどかったらまた誘われたときに『この前、気疲れしてしまって』って自分が行くのは断ると思います。

そんな理由でわざわざ行きませんよ。

まあ、義実家に遊びに行っていて、たまたま親戚だとか
義母の友人が訪ねてきた（事前に義母が示し合わせていたとしても）
・・・って場合は別でしょうけど、
「誰々が来るから、こっちに来い」なんて言わないし、
言われたとしても行きませんよ。

子供が熱出したとか、夜泣きで眠れていなくしんどいとか、
検診とか・・・義母がぐずらない、これ以上無理言えない理由で
何とか切り抜けることです。

夫に相談してもいいんだけど、夫が母親寄りだったら
（義実家の距離が近いっていうのはそういうことなんだろうけど）
いくら相談しても「（母親のところに）行ってやれよ」と言われる
可能性は高いです。

ですから、義母のところに行くにしても”夫同伴”が条件ですね。
トピ主と赤ちゃんだけで行かないことです。

最初に書いたように、義実家に用事があって行っている最中に
誰かが来たってことは避けようもないので諦めるしかないですが、
義母が誰かに赤ちゃんを見せたいがための要求には付き合う
必要はないです（赤ちゃんを見たい、んじゃなく義母がとにかく誰彼
かまわず見せたいだけ、なんですよ）。