彼氏にときめかないと言われました

付き合って3年ほど経つ10歳年上の彼氏がいます。彼は高校時代の先生であり、卒業後に連絡を取り、お付き合いを始めました。

来年からわたしは社会人になるため、結婚の話も少しだけしていました。ですが、最近なんだか態度が素っ気なく、痺れを切らして彼に尋ねました。
すると彼は泣き出し、「みんなに祝福されないことが辛い、世間体を気にしてしまう」と。はっきり言って、卒業後に付き合ったとはいえ批判があるかもしれないことは付き合う前から分かっていたし、じゃあなんで付き合う前に考えなかったのかと、今更すぎて驚きと怒りの気持ちが湧いてきました。

彼は考える時間が欲しいとのことなので、数日間連絡を取らずに過ごしていたのですが、このままの状態にしておくのも…とモヤモヤしてしまい、わたしから連絡を取りました。すると、今度は「ときめかなくなってしまったことも原因」と言われ…ショックでした。

さらに、わたしは待ってる間どうすればいいんだと聞くと、「その間に他に幸せになれる道があるならそれを選んでもいい」と言われました。

「別に最悪の結果(別れること)になったとしても、俺はご飯行ったり遊んだりすることに抵抗ないよ」とも言われてしまい、考える時間が欲しいと言っている割には別れることを前提として話を進められているような気がします。

正直わたしは別れたくありません。純粋に好きだという気持ちと、彼の性格を知った上で支えたいという気持ちがあります。ですが、今のままだとなんと声をかければいいのか分からず…アドバイスをお願いします。