過去を気にする彼氏

結婚を考えている彼がいます。 ただ、その彼が過去の恋愛をかなり気にしてきて、しかも頻繁に言葉にするので、少ししんどい時があります、、、 お互い20代後半です。 私は彼と付き合うまで数年彼氏がおらず、でも彼から見ると私がそんなに彼氏がいないことが意外らしく、本当にいなかったの？と言ったことをニュアンスを変えて何度も聞いてきます。 それこそ、ワンナイトや遊びがなかったのか、なども、、、 彼氏がいなかったのは本当です。 でも正直、言いたくないこともあります。 ものすごく遊んでいたとかではありませんが、、 もちろん今は一途に彼のことが好きなのに、ずっと過去のことを気にされると正直嫌な気持ちにもなってしまって、聞かれるたびに最近では返答が辛くなります。 本当に彼のことが好きなので気にしないでほしいし、過去は過去、今は今だと思うのですが、根気よく返答して付き合っていくしかないのでしょうか。 なんと言ったら安心してくれるのか、わからなくなっています。