義姉の出産祝いについて

夫の兄弟（夫は双子で一応弟、他にもう1人兄がいる）の双子の兄夫婦に第二子が産まれました。上の子の時には病院まで会いに行ったり、私達夫婦にも子供がいて、出産時には病院まで一目会いにお祝いに来てくれていました。今回は出産された日から退院までが平日のみで他県であり、夫の休みの都合も合わず、子供は入れない病院のため、里帰りから自宅に帰って落ち着いたら会いに行こうと話し合って決めていました。あと少しで自宅に戻るという話も聞いているところでした。
しかしもう1人の兄（双子の兄とは近くに住んでいる）から車を借りていて返す事になった時、夫がついでに義姉の実家（少しの移動で行ける距離）へ行って赤ちゃんに会ってくると言い出したのです。さらには子供も連れて行って来ると。
みなさんなら夫の兄弟の奥さんの里帰り中の実家に赤ちゃんに会いに行きますか？
私の中にはない考えで里帰り中に会いに行くのは非常識だと思うこと、言い過ぎかもしれませんが、私には関係のない人（義姉までならわかるけど、その実家となるとちょっと遠過ぎる関係性）だと思うこと、私は行かないとも前々から言ってありました。私が納得出来ない環境に子供も連れて行って、子供が普通の関係性だと思って欲しくないとも思ってしまったのですが、私が間違っているのでしょうか？
私は元から用事があったので車も返しには行けない予定でした。
元々義姉とは高校のOBと後輩（義姉）という関係で知り合いではあったようです。
私の母に言ったら、それは非常識だ、と。そこ（私の夫の兄弟の奥さん）までは大切に出来ないし、逆の立場なら来て欲しくないから夫にもやめて欲しいと言われてしまいました。夫には言ってませんが。

分かりにくい文章ですみません。なかなか相談出来る場所がなくて。みなさんの意見を聞きたいです。