結婚しようとしてる彼ですが…

彼が怪しいので、話を聞いて欲しいです！

彼氏とは5年付き合って、結婚を前提に今年同棲スタートしました。
ですが彼との記憶を遡ると、付き合う前から女癖悪いのかな？と思う節があったことを思い出し、
結婚を迷っています。

彼と私は社内恋愛で上司(彼)と部下の関係だったのですが…
付き合う前、同期のSちゃんを狙ってるみたいなLINEをちょくちょく送ってきてました。その時は、私にも別の彼氏がいたので、純粋な気持ちで応援してました。
慰安旅行のときも、いい子いない～？？アポ取っといて笑とか冗談交じりながらも、本気で私に何度もLINEしてきてました。
それ以降は、Sちゃん怖くなってきた…とかいうLINEが来て、私にアタックし始める感じでした。

それからしばらくして付き合うことになり、また気になることが。名前を2回くらい間違えるんです。
思い当たる名前ではなかったものの…。そこから不信感が募る。

でも、結婚したいと思ってるよとか、一緒に住みたいと思ってるとか、○○が大切だよとか、
たまに話してくれる内容が本気なのでそこで信頼を取り戻してました。

それから、最近彼氏がケータイを変えたとき、一緒に画面を見ながら、アプリのインストールを手伝っていたのですが、
途中で、むかし彼氏と出会ったときの店舗で働いていた学生アルバイトの女性から電話がかかってきたんです。彼氏は、心なしかすごい慌てようで話がストップして、電話を切っていました。
本当は、いつも電話してるの？？とか聞きたいですが、どう聞いたらいいですか？？

こんな感じで、女性の影を感じてしまって、結婚してもこんなだったら嫌だなと考えてます。
でも、結婚したいです。
理由は、別れたとき、恨んでる女とかアルバイト女とくっついたら私が精神死にそうだからというのもあります…！
見てくださった方ありがとうございます。ご意見あればお待ちしています