夫が親戚や両親も一緒に旅行に行きたがって困ります

ポポロンと申します。
夫と、私の母の3人で暮らしています。
今度、近所に住む夫の友人と、私たち家族・夫のご両親・夫の親戚家族で、旅行に行くことになりました。
あまり乗り気ではないのですが、私の母は車でないと旅行に連れていくのが難しくなってきたので、承諾しました。
ところが、母が調子が悪く、行きたくないと言い出したのです。
母はちょっとウツ気味なので、私はこうなる可能性もあると思っていました。
夫の親戚や両親など、気を使うことが多いので、行きたくないと思いますが、我慢してくれていたのだと思います。
とはいえ、調子が悪くて行きたくない人を無理に連れていくのはかわいそうなので、やめさせてあげたいのですが、夫は「せっかくみんなで行こうと思ったのに」「みんなで行けるチャンスはなかなかない」「みんな楽しみにしている」と、母の具合は全く心配せず、どうしても行かせたくて仕方ないようです。なぜそこまで「みんなで行く」ことにこだわるのか、さっぱりわかりません。

楽しいかどうかはひとそれぞれ。親戚同士は楽しいかもしれませんが、私も私の母も「気を使わなくていい」と言われてもやはり気を使いますので、正直なことを言えば楽しみではありません。

夫は、こういう私の気持ちは、理解しようともしてくれません。「自分が楽しいんだからみんなも楽しい」と思っていて、そう思わない私たちが「おかしい」と言うのです。
こういう考え方の人に、「みんながみんな、自分と同じように楽しみにしているわけではない」ことをどうしたらわかってもらえるでしょうか。
わかってもらうのは無理なのでしょうか。