離婚か黙認か

結婚三年。私29歳、夫33歳、10ヶ月の赤ちゃんがいます。
夫が三ヶ月ほど前から浮気をしています。
帰宅も遅く、残業と嘘をつきどこかに寄り道しています。
携帯も以前はリビングに置いていたのに、今は常にカバンの中かポケットで、トイレにも持ち込んでます。
悪いと思いましたが、不安でしかたないので夫の携帯を見ました。
すると頻繁にメールのやり取りをしている女性がいました。
少しの時間しか見れなかったので履歴しかみておらず、内容はわかりませんし。
このまま浮気の証拠をさがし離婚をするか、証拠すら探さず黙認すべきか悩んでいます。
気持ちとしては、浮気をしているのなら離婚したいですが、シングルマザーになる自信も覚悟もできていない私はこのまま知らなかったことにするほうが賢明でしょうか？

アドバイスお願いします。