この親戚の集まりに行くべきでしょうか？

ご覧いただいてありがとうございます。 皆様の意見を聞きたくてトピを立てました。 私：30代嫁。専門職のフルタイムパート。妊娠７ヶ月。4歳のこどもがいます。 3月に、義姉が第一子を出産しました。 4月の中旬に、夫の母方の祖母と伯母が赤ちゃんに会うために上京します。（片道4時間） この義祖母は後妻のため義母・夫とは血縁関係はありません。 去年亡くなった祖父とは長年仲が悪かったそうで、年賀状の返事はいつも血縁のある祖父名義のみ。娘が生まれた時も祖父だけが会いに来ました。 つまり夫と祖母の交流は普段ないのです。 ＜今回の日程＞ 1日目、午前中に上京し、義父母が迎えに行き義姉宅にて赤ちゃんに会うそうです。 その後、車で2時間30分ほどかかる義父母宅へ行き一泊。 2日目、義父母、義祖母、伯母、伯母の娘で15時から某テーマパークに行くそうです。 テーマパークへも車で3時間かかります。 義母から連絡があり、 上記スケジュールで動くので、1日目の夜ご飯を実家に食べに来ないかというお誘いがありました。 その日は午前中に娘の懇談会、午後から2時間娘の運動系の習い事が入っています。夫も1時間ほど同じ施設内で運動しています。 夫実家は車で1時間弱なので、夕食に行くことは時間的には可能ですが 普段は疲れて夕方みんなで少し寝たり、ゆっくりしています。 祖母と伯母も朝から上京して、また移動して、翌日テーマパークなので 疲れているところに私たちが行ってお互いに相手をしなければいけないってなんだろうと思っています。 夫は「正直どっちでもいい。方言の強い祖母とはどうせあまり話できないし」と言っています。 義母は私たちを使ってもてなしたいのかなと思います。よくそういうことがあるので… 断りたいのですが、どう思われますか？