バツイチ彼氏について相談です

初めまして。私は未婚30代後半で、付き合って9ヶ月のバツイチ彼氏がいます。彼は離婚して、小学生の娘が2人います。 （親権は元嫁）去年、彼と知り合い、自然と惹かれあってきました。私は若い頃に、婚約者と破綻になり、それ以降、結婚には消極的でしたが、彼と出会ってから変わりました。 知り合って3ヶ月後、彼から将来を見据えて、一緒にいてほしいと告白されました。最初は不安でしたが、彼が私を支えてくれてここまできました。彼との日々は楽しくて、安心感があり幸せでした。彼を好きになればなるほど、責任も感じ、自ら試練を課して、子供や元嫁にやきもちをやかないか？試してきました。幸いすんなり受け入れることができ、今では子供も元嫁も大事に思っています。私も彼も試練を乗り越えることで、お互いの信頼感や絆が増し、自身にも繋がってきました。 しかし、去年の１２月。彼が子供と会い、彼の頭の中は、子供のことでいっぱいになり、子供に対して申し訳ない気持ち。また私に対して、子供を優先的に考えることへの申し訳なさが増してきているようです。彼が子供と会えばそうなることは自然なこと。子供も私も大事でいいじゃない？といいますが。彼自身が、割り切れない自分が悪いと責めたりしています。今のままじゃ私を幸せにできない気もする。といわれました。正直、幸せにしてもらおうとか思っていません。一緒に築くのが幸せだから。ひとまず、彼の話を聞き、私の想いも伝えました。彼には、たまには私に甘えてもいいんじゃない？もう全部受け入れてるよ。今は少し距離を置いて整理してみたら？と伝えました。 恐らく、私の覚悟が決まり多々ある中、彼も責任感が強くなっているのだとも思います。ただどこか、前に進めていない彼もいて。少しずつ一緒に歩むしかないのかな？と思いながら、私も再度整理をしています。苦しくなってここに投稿してみました。よろしくお願いします。