元彼の家の近所に引越し

今春、結婚が決まり、主人の会社の社宅に住む事になりました。 社宅はたくさんあり候補がいくつかあるのですが 主人が一番気に入っている場所のすぐ近くに なんと元彼が住んでいるマンションがあります。最寄り駅も同じです。 主人には詳しくは話していませんが 元彼とは大学時代から６年間付き合い同棲もしていて お互いの両親にも紹介し結婚の約束もしていました。 ところが、浮気されあっさりと捨てられてしまいました。 もう３年前の話です。 当時は死んでしまいたいくらい落ち込んで鬱状態にもなったけど いま考えると、そんなにいい男でもなかったし 主人と出会えたので、元彼と結婚しなくて本当に良かったと 心から思えます。 でも、やはり辛く悲しい思い出である事に変わりはありません。 元彼はマンションを購入してしまっているので おそらく今も住んでいて、当時の浮気女と一緒かもしれないし もしかしたら、もう結婚して子供もいるかもしれません。 今では元彼を思い出す事は全くありませんが やはり街でばったり会ってしまったら、複雑な気持ちになると思います。 そして、その街自体も同棲していた思い出の街だったりします。 主人はここの社宅がとても気に入っています。 私は「気が進まない。違う所がいい」といちおうは言いましたが 当然その理由を聞いてきます。 本当の理由を言えば、主人は住む場所を変えてくれるでしょう。 でも、主人の心に「まだ元彼が忘れられないのか…」と 暗い影を落とす事になると思うのです。 主人と出会ってから元彼を思い出した事なんて一度もなかったのに いつも考えていたように誤解されるのがとても怖いです。 うまく説明できる自信もありません。 私はどうしたらいいでしょうか？