妊娠中に夫が他の女性に恋心。二人目は？

こんにちは。皆様のご意見が聞きたくてトピしました。よろしくお願いします。 私は2年前に出産しましたが、その妊娠中に夫が職場の女性に淡い恋心を抱いていました。 そのことに気がついたきっかけは、掃除中にたまたま開いていた夫の手帳の一言日記を見てしまったからです。悪いと思いつつ、でも大したことは書いて無いだろうと思いながら見たら、「職場のAさんが気になる」とか「何となく好きだなぁ。恋に近い気持ち」「他の男と話してると気になる」等の記載がありました。問いただすと、認めましたが、相手は既婚者かつ妊婦だったので夫の気持ちの問題だけで、何もありませんでした。なので当時はとりあえず許しましたが、2人目を考え始めた時に思い出して、また浮気心が芽生えたら嫌だと思い積極的になれません。同じような経験された方はいらっしゃいますか？