結婚式でのご祝儀について

トピを開いていただきありがとうございます。
20代後半の専業主婦のたもと申します。家族構成は主人と未就学の子供の3人家族です。
先日、義弟が結婚式を挙げました。遠方で我が子も小さく(体調不良ということもあり)迷惑を掛けてはいけないということで式には参加しておりません。

今回ご相談したいのはご祝儀についてです。

自分が結婚した時、義弟は社会人でしたが、式も挙げないということで1銭もいただいておりません。出産時も同じです。

それがこの度、義弟が結婚すると聞いた時にご祝儀はどうしようか本当に迷いました。普通なら10万包みたいとこですが、現在主人の勤め先の経営も思わしくなく、給料は毎月手取りで20万ほどです。
式に行くには交通費支給もないということで、一人5万はかかってしまいます。
それで、結局5万渡したのですが、式の後皆からのご祝儀が思ったより少なくかなり赤字であったと義弟から言われました。

やはり、苦しくても世間の常識の通り10万お渡しすべきだったでしょうか？
ご助言よろしくお願い致します。