旦那の従兄弟の結婚式に招待されました

長文ですがよろしくお願いします。 旦那の従兄弟の結婚式に招待されました。 夫婦宛に招待状が送られてきたので、私のことも 招待してくださったようです。 出席したいと思っているのですが６か月の赤ちゃんを結婚式に連れて行ってよいものか、悩んでいます。 従兄弟の方は私たちの結婚式に来て下さったので、 私も出席してお祝いしたいのですが。 記念の結婚式が、赤ちゃんの泣き声などで台無しになってしまったら とても残念な一日になってしまうと思うのです。 旦那には子供を連れて行って良いか聞いてみて、と 言ってみましたが、迷惑だ、と言う人はいないですよね？ そうなるとやはりこちらからお断りするべきなのか。 近い親戚でこれからもお会いする事が多いので出席したい気もします。 けれど、子供の事でご迷惑を掛けるのも申し訳なく。 最悪、旦那のみ出席という事も考えています。 皆さんのご意見を聞かせて頂けないでしょうか？ 旦那のみ出席の場合、招待状の返事の葉書には、 どのように書けば失礼にならないか、併せて教えて頂けると助かります。