彼氏の子連れ

初めまして、 見ていただきありがとうございます。 私には18歳年上のバツイチ彼氏がいます。 子供が一人おり親権は元奥さんが引き取っています。 彼は子供が好きで1カ月に一回会い、ちなみに私も子供は好きなので一緒に会わせてもらい仲良くしています。 私達はお互いの仕事の都合でなかなか休みが合わず昨年の8月に同居しました。 私と彼が一緒にいることが多くなったのか最近彼が構ってくれなくなって寂しいと子供が思っているようです。 ちなみに子供との二人の交換日記がありそこに書いてありました。 そこで質問なんですが、子供のためにもお互い別で暮らした方が良いのでしょうか？ 私は彼が好きで別で暮らしてしまうと会う時間が減り冷めてしまうんじゃないかと思っています。