気持ちに折り合いをつけるためには？

私には付き合って1年の同い年の彼氏がいます。2人とも大学生です。
彼は優しくて、ユーモアもあって、頭もよくて、私のことを1番に思ってくれます。難関資格取得を目指し、私との結婚まで考えているようです。
だからこそ、彼に申し訳ないと思ってしまうことがあります。
それは、私が中学生の頃に付き合い、割と理不尽な親の反対で別れてしまった元彼のことが忘れられないことです。
元彼とは成人式で再会して、元彼はまだ私に未練があるようです。
私も同じ気持ちです。
しかし、現在の私には彼氏がいます。
今の彼氏のことをとても大切に思っていますし、好きな気持ちは変わりません。
親は元彼のことが嫌いだし、私も今彼氏がいるしということで元彼との連絡等は絶っていますが、未だに忘れられず会いたくなってしまいます。
その度に今の彼氏に申し訳なく思ってしまいます。
わがままな気持ちと向きあうためにはどうしたら良いのでしょうか。