出産に迷い

結婚3年目の32歳です。 年齢的にもそろそろ子供を・・・と思うのですが、不安が先にたち決心がつきません。 というのも、私の兄と、主人の姉が障害をもっているのです。 どちらも遺伝性の障害ではないのですが、兄を育てていた母の苦労や、自分が学校で兄のことをからかわれたりした 悲しい記憶を思い出すと、自分が障害児を持ったときに育てる自信がどうしても持てないのです。 もちろん兄のことは大事な兄弟と思っていますし、主人の姉のことも大事な存在と思っています。 自分のおなかを痛めた子なら愛せるし、愛せないなら産む資格は無いのでは・・という意見が大多数だと思いますが、 現実に障害者本人、家族のつらさを身をもって知っているだけに不安も現実的だし、夫婦両方の家族に障害が ある場合は、やはり障害児が生まれる可能性が高いのだろうか・・・などと考えてしまいます。 こんなネガティブな考えなら、子供を持つという望みはあきらめるべきなのでしょうか？ お子様の居る方、居ない方、皆様アドバイスよろしくおねがいいたします。